프로그래밍팁/동기화 (2) 썸네일형 리스트형 apache camel 은 무엇인가? apache camel은 들어본 사람도 있고 아닌 사람도 있다. openapi로 뭘 할 수 있을까? db커넥션을 편리하게 할 수 있다. java에 하드코딩하던 것들을 제거하여 개발환경, 검증 환경, 운영환경을 다르게 사용할 수 있다. 이 기능 사용하지 않을 수 없다. pom.xml에 설정하고 사용하는 것이 간단하다. 지금 하고 있는 프로젝트를 살펴보면 이런 비슷한 기술들이 있다. 공부 따로 하는 것도 좋지만 내 프로젝트를 뜯어보는 것도 하나의 공부가 될 수 있다. apache kafka를 보면서 apache camel도 알게 되었다. 분석하는 것은 재미있는 일이다. [배운것 공유] CDC kafka 연계 방법 CDC kafka라는 것은 왜 생기게 되었을까? 데이터를 모으고 공유하기 위한 방법 중 하나이다. sync를 맞춘다가 맞을지도 모른다. 이 개념을 일하면서 알게 되었다. 내가 맡은 일 중 일부가 이 업무로 이루어진다. 가까운 것부터 하나씩 분석하는 것이다. CDC는 간단히 DB의 데이터의 변경이 생기면 그 데이터를 복제한다. CDC에서 복제한 데이터를 kafka에 전송한다. kafka에서는 수신받은 데이터를 db에 저장을 허게 된다. 이때 서로의 테이블명과 칼럼명이 다른 걸 매핑시키는 과정을 거친다. 데이터의 누락을 줄이기 위해 수신된 데이터는 복제과정을 거친다. 복제된 데이터는 파일 형태로 저장이 된다. 간단한 내용만 적었지만 내용이 방대하므로 하나씩 배우며 공유하려 한다. 문서상에는 CDC와 kafk.. 이전 1 다음