반응형 데이터 파이프라인1 데이터 직군 데이터 엔지니어 엔지니어는 데이터를 수집하고 저장하는 역할 수행 추가적으로 시각화를 통해 더 나은 데이터 결과를 제공하는 역할 수행 즉, 데이터 생성 → 수집 → ETL → 시각화 의 과정을 엔지니어가 수행 초기 스타트업은 데이터 수집, 분석에 Google Analytics를 많이 사용 이는 프론트엔드에서 데이터 수집 코드 작성 시 데이터 저장과 시각화까지 전부 손쉽게 가능하기 때문 하지만 기업 입장의 커스터마이징이 힘들기 때문에 결국 엔지니어가 직접 데이터 환경을 구축하게 됨 데이터 파이프라인 데이터 파이프라인: 데이터의 생성 이후 여러 서버를 거쳐 최종 DB에 저장되는 전반적인 과정 따라서 데이터 엔지니어의 업무 ≈ 데이터 파이프라인 구축 이라 할 수 있음 데이터 파이프라인 구축은 데이터와 관련된 서.. 2023. 7. 26. 이전 1 다음 반응형
