3. 데이터관리37 OCI Data Integration 활용 - Incremental Data Load 구성하기 OCI DI Incremental data load 를 위해서는 아래와 같이 2가지 방법이 있습니다. CASE 1 : Data Flows 에서 지원하는 DB (Oracle DB) 가 Source 일 경우 Incremental 옵션이 활성화 됩니다. 이때, 기준이되는. watermark column 이 필요하게 되는데 UTC 기준으로만 동작합니다. Watermark column 에 시간과, OCI DI 내부적으로 저장된 마지막 수행 시간을 비교해서 그 이후의 값들만 가져옵니다. 만약 소스 테이블에 UTC 기준 시간이 없다면, 사용하기 어렵습니다. 9시간 시차가 발생하기 때문에 아무런 동작을 하지 않습니다. 따라서 이 경우 아래와 같은 쿼리를 사용해서 Source 를 가져오는 기능을 사용할 .. 2025. 4. 8. OCI Autonomos Database - Automatic Partitioning 자동 파티셔닝(Automatic Partitioning)는 사전에 지정된 스키마에 포함된 테이블과 관련 인덱스에 대해 자동으로 워크로드를 분석 후 결과에 따라 파티셔닝을 적용하는 기능입니다. 적절한 파티셔닝 전략을 찾으려면 애플리케이션 워크로드와 데이터 배포에 대한 깊은 지식이 필요합니다. 수동 파티셔닝을 수행할 때는 워크로드를 분석하고 테이블과 인덱스에 파티셔닝을 적용하는 방법을 선택하여 애플리케이션의 성능을 향상시켜야 합니다. 자동 파티셔닝을 통해 Autonomous Database 사용자는 수동 스키마 및 워크로드 분석을 수행하지 않고도 파티셔닝의 이점을 얻을 수 있습니다. 해당 기능에 대해 아래와 같은 순서로 정리 해보도록 하겠습니다.1. 자동 파티셔닝 동작 방식2. 자동 파티셔닝 테스트 시나리오.. 2024. 6. 24. OCI Autonomous Database 소개 - 1) 관리 콘솔 살펴보기 안녕하세요.이번시간에는 Oracle Autonomous Database에 대해 소개해드리려고 합니다.1. ADB 간략 소개 Autonomous Database는 탄력적으로 확장되고 빠른 쿼리 성능을 제공하는 사용하기 쉬운 완전 자율 데이터베이스 입니다. Autonomous Database는 데이터베이스 관리가 필요하지 않습니다. 하드웨어를 구성, 관리하거나 소프트웨어를 설치할 필요가 없으며 데이터베이스 프로비저닝, 백업, 패치 및 업그레이드, 확장 또는 축소를 처리하는 완전히 탄력적인 서비스입니다. 언제든지 컴퓨팅, 스토리지 사이즈를 확장하거나 줄일 수 있으며 인스턴스에 대한 리소스를 변경할때 다운타임이나 서비스 중단 없이 리소스가 자동으로 축소되거나 증가합니다. Oracle Database를 기반으로.. 2024. 6. 19. AI Vector Search Overview 매뉴얼 기반으로 작성되었습니다. 오라클 AI 벡터 검색은 인공 지능(AI) 워크로드를 위해 설계되었으며 다음을 수행할 수 있습니다.키워드가 아닌 의미론에 기반하여 데이터를 쿼리할 수 있습니다.벡터 데이터 유형벡터 데이터 유형은 오라클 데이터베이스 23ai 출시와 함께 도입되어, 벡터 임베딩과 함께데이터베이스에 비즈니스 데이터와 함께 벡터 임베딩을 저장할 수 있는 기반을 제공합니다. 임베딩 모델을 사용하면 비정형 데이터를 벡터 임베딩으로 변환한 다음 비즈니스 데이터에 대한 시맨틱 쿼리에 사용할 수 있습니다.테이블 정의에서 벡터 데이터 유형을 사용하는 다음 기본 예제를 참조하세요:CREATE TABLE docs(doc_id INT, doc_text CLOB, doc_vector VECTOR);VECT.. 2024. 6. 19. OCI Data Integration 활용 - Data Integration Task 작업 모니터링 하기 이번 Post는 앞서 구성했던 Data Integration Task의 수행 결과를 모니터링 하는 방법에 대해 정리하겠습니다. 수행 결과에 대한 모니터링으로는 OCI Notification & Event Service를 통해 전달 받거나 Oracle Database 내에 결과 테일블에 Data Integration Task 수행 결과를 저장할 수 있습니다. 1. OCI Notification Service와 Event Service를 이용하여 Data Integration task 수행 결과을 전달 받을 수 있습니다. OCI Notification은 특정 Topic에 사전에 등록된 메일이나 Slack, SMS에 설정된 Event 결과를 전달 받을 수 있습니다.상세한 OCI Notification & .. 2024. 6. 19. Oracle 데이터베이스 보안 솔루션 #3 - Data Safe (3) - Data Masking > 이전포스팅Oracle 데이터베이스 보안 솔루션 #3 - Data Safe (2) - Activity Auditing (활동 감사) 이전 포스팅Oracle 데이터베이스 보안 솔루션 #3 - Data Safe (1)Oracle 데이터베이스 보안 솔루션 #2 - Data Safe (1) 이번 시간에는 Data Safe 의 Activity Auditing (활동 감사)에 대하여 알아보겠습니다. Act" data-og-host="oracle-cloud.tistory.com" data-og-source-url="https://oracle-cloud.tistory.com/entry/Oracle-%EB%8D%B0%EC%9D%B4%ED%84%B0%EB%B2%A0%EC%9D%B4%EC%8A%A4-%EB%B3%B4.. 2024. 6. 2. OCI PostgreSQL Backup & Recover (feat. 접속 방법) OCI PostgreSQL Backup & Recovery를 알아보기 전에 OCI에서 제공하는 PostgreSQL에 접속하는 방법부터 간단히 설명하고 넘어가도록 하겠습니다. 1. 아래 링크를 통해 PGAdmin (PostgreSQL 접속 Tool) Downloadhttps://www.pgadmin.org/download/ DownloadDownload pgAdmin is a free software project released under the PostgreSQL licence. The software is available in source and binary format from the PostgreSQL mirror network. Because compiling from source requir.. 2024. 5. 22. PostgreSQL High Availability PostgreSQL Replication PostgreSQL Replication은 크게 Physical Replication과 Logical Replication으로 구분① WAL 파일 자체를 전달하는 (File-based) Log Shipping② WAL 파일 저장 여부와 상관없이 WAL Record를 전달하는 Streaming Replication - Logical Replication은 Physical Replication의 한계를 해결하기 위한 목적으로 도입.- Physical Replication과 마찬가지로 WAL을 기반으로 작동하지만, DML 발생 시 walsender 프로세스가 WAL Record를 Logical Decoding 처리한 후 전송한다는 차이. Physica.. 2024. 5. 22. OCI Data Integration 활용 - Data Pipeline Task 생성 및 Schedule 지정 이전 Post에서는 Data Loader Task, Data Integration Task를 구성해 보았습니다. 이번 Post에서는 이전에 생성한 Data Loader Task와 Data Integration Task를 이용하여 Data Pipeline Task를 생성하고 schedule을 지정해 보겠습니다. Data Pipeline Task는 Integration Task와는 달리 Data Source와 Target이 없이 이미 생성된 Task 들을 하나의 Pipeline으로 구성된 Task를 의미 합니다. 미리 생성된 Customer Data와 Revenue Data를 Loading 하는 Data Loader Task와 Loading된 Customer Data와 Revenue Data를 Join 하.. 2024. 5. 22. 이전 1 2 3 4 5 다음
