AWS/DMS를 사용한 RDS to OpenSearch CDC 복제 진행하기

DMS를 사용한 RDS to OpenSearch CDC 복제 진행하기 (2) - OpenSearch 도메인 생성 및 DMS를 통한 CDC 복제 작성 일자 : 2024년 03월 22일 본 포스팅이 다루는 내용 OpenSearch용 VPC 보안 그룹 생성하기 OpenSearch 도메인 생성하기 DMS용 VPC 보안 그룹 생성하기 DMS의 복제 인스턴스 생성하기 RDS로부터의 Source 엔드포인트 생성하기 DMS와 Opensearch 간 연결을 위한 IAM 역할 및 정책 생성하기 OpenSearch로의 Target 엔드포인트 생성하기 VPC 외부에서 OpenSearch Dashboards에 접속하기 Database migration tasks 생성하기 CDC 복제 테스트 1. OpenSearch용 VPC 보..
DMS를 사용한 RDS to OpenSearch CDC 복제 진행하기 (1) - RDS 인스턴스 생성과 EC2 연동 작성 일자 : 2024년 03월 20일 본 포스팅이 다루는 내용 MySQL 기반의 RDS 인스턴스 생성하기 RDS 인스턴스에 접근하기 위한 EC2 인스턴스 생성하기 RDS의 VPC 보안 그룹에서 EC2의 VPC 보안 그룹으로부터의 인바운드 트래픽 허용하기 EC2 인스턴스에서 RDS 인스턴스로 접근하기 OpenSearch로 복제할 데이터베이스 생성하기 RDS 인스턴스 생성하기 이진 로깅 활성화를 위한 Parameter Group 생성하기 MySQL 데이터베이스에서 CDC를 사용하려면 이진 로깅을 활성화해야합니다. 아래의 과정을 통해 이진 로깅을 활성화할 수 있는 Parameter Group을..
DMS를 사용한 RDS to OpenSearch CDC 복제 진행하기 (0) - 들어가는 말 작성 일자 : 2024년 03월 18일 들어가는 말 (해당 부분은 필자의 여정이 어떻게 시작되었는지를 담고 있습니다. 중요하지 않은 부분이니 건너뛰어도 좋습니다. 아래의 "시작하기 전에 알아야 할 것들" 파트는 꼭 읽어주시길 바랍니다.) 필자는 현재 DreamVault 라는 프로젝트 명으로 "생성형 AI를 통해 제작한 음악을 공유하는 플랫폼"을 개발하고 있습니다. 음악과 더불어서 음악을 생성할 때 사용한 프롬프트를 사용자들에게 같이 보여주는 것이 저희 서비스의 핵심 기능인데요. 때문에 한 문단 정도되는 프롬프트의 내용과 음악의 제목, 업로더의 명, 장르, 태그들을 통해서 사용자가 원하는 음악을 찾을 수 있도록 검..
gerrymandering
'AWS/DMS를 사용한 RDS to OpenSearch CDC 복제 진행하기' 카테고리의 글 목록