Infrastructure/Message Queue (1) 썸네일형 리스트형 [Kafka] ETL, EAI, Streaming ETL vs EAI vs Kafka 이번 장에서는 ETL과 EAI에 대해서 알아보고 최근 많이 사용되고 있는 Kafka에 대해서 알아본다. ETL(Extracting & Transformation & Loading) 1990년대 소매 조직에서 구매자 트렌드를 분석하기 위해 사용되기 시적하였다. ETL은 다양한 데이터 소스에서 데이터를 추출(Extracting)하여 필요한 데이터로 변환(Transformation)하고 데이터를 필요로 하는 곳으로 로딩(Loading)하는 것을 의미한다. ELT을 쉽게 할 수 있게 제공해주는 툴을 제공하는 업체들이 존재하며 원하는 데이터로 변환하는 비즈니스 로직이 있어야 한다. 주로 데이터베이스의 데이터를 통합하는데 많이 사용되며 대용량 데이터를 일정 주기마다 배치성으로 처.. 이전 1 다음
