데이터 소스가 늘어날수록 파이프라인이 망가지는 이유
처음 데이터 파이프라인을 구축할 때는 생각보다 단순해 보인다. 운영 데이터베이스 하나와 분석용 저장소 하나만 연결해도 기본적인 리포트와 분석은 가능하기 때문이다. 하지만 서비스가 성장하고 새로운 도구가 추가되기 시작하면 상황은 빠르게 달라진다. CRM, 광고 플랫폼, 고객 지원 솔루션, 결제 시스템, 웹 로그, 모바일 앱 데이터가 하나둘 연결되면서 파이프라인은 예상보다 훨씬 복잡한 구조로 변해간다. 흥미로운 점은 데이터 양이 … Read more