Database/ETC
2020년 새해 첫 번째 목표 - 아파치 카프카
데브포유
2019. 11. 26. 20:38
반응형
이제까지 개발한 ETL를 모두 "아파치 카프카"를 중심으로 다시 개발하는 것이
2020년 새해 첫 번째 목표입니다.
오라클(OLTP), 웹로그 등 다양한 데이터소스에서 타켓 DB(몽고디비, 코크로치디비, 마리아디비, ...)로 데이터를 옮기는
ETL이 중복 개발 되었습니다. 프로그램을 수정해서 2개의 프로그램으로 재 개발하는 것보다 카프카를 이용해서
심플하면서, 고가용성 있게 다시 개발하는 것이 시스템 관리에 더 낫다고 판단이 되어졌습니다.
반응형