카파, 람다 아키텍처 비교 (Kappa vs Lambda)
카파 아키텍처(Kappa Architecture)
ETL
데이터 수집 전처리하기 (태그, 특수문자 코드)
웹에 있는 데이터를 수집하다보면 보이는 텍스트와 달리 태그나 특수문자 코드 등이 그대로 함께 수집되는 경우가 있습니다. 예를 들면 아래와 같은 형태로 수집될 수 있습니다.
데이터 제공 Layer의 각 방법 비교(RESTful API, Direct Connection, Data Forward Service)
데이터 제공 Layer는 데이터 소스(Data Lake, Data Warehouse) 내부의 데이터를 가공해서 서비스 애플리케이션, 분석 애플리케이션, 각종 데이터 분석 도구 등에 제공하는 Layer입니다. 이 Layer에서 데이터를 제공하기 위해 사용하는 방법으로 크게 세 가지(...