2020년 새해 첫 번째 목표 - 아파치 카프카

이제까지 개발한 ETL를 모두 "아파치 카프카"를 중심으로 다시 개발하는 것이

 

2020년 새해 첫 번째 목표입니다.

 

오라클(OLTP), 웹로그 등 다양한 데이터소스에서 타켓 DB(몽고디비, 코크로치디비, 마리아디비, ...)로 데이터를 옮기는

 

ETL이 중복 개발 되었습니다. 프로그램을 수정해서 2개의 프로그램으로 재 개발하는 것보다 카프카를 이용해서

 

심플하면서, 고가용성 있게 다시 개발하는 것이 시스템 관리에 더 낫다고 판단이 되어졌습니다.