목록DB (1)

SeaForest

데이터 파이프라인이란, ETL과 ELT

BI 업무를 하면서, 잘 정제된 데이터는 중요하다는 점을 알게 되었고, 자연스럽게 ETL 쪽에도 관심을 갖게 되었다. 데이터가 어떻게 구성되었느냐에 따라 작업 효율이 달라지기 때문에 분석에 최적화된 형태로 잘 정리된 데이터가 필요하고, 잘 구성된 데이터는 데이터 파이프라인 안에서 만들어지기 때문에 데이터를 잘 전달하기 위해서는 효율적인 파이프라인 구축이 필요하다. 1. 데이터 파이프라인이란? 데이터를 한 장소에서 다른 장소로 옮기는 것 데이터를 이동시킬 수 있는 통로를 만드는 것 데이터를 생성해서 저장하기까지의 일련의 과정 예시 API → Database Database → Database Datbase → BI Tool 2. 왜 데이터 파이프라인을 구축할까 데이터 파이프라인을 구성함으로써 데이터 기반의..
DB 2023. 3. 12. 21:36
이전 Prev 1 Next 다음