데이터 엔지니어링

[정리] 최신 데이터 인프라 이해하기_#1 기본 개념과 단어 설명

영상 목차 ( 긱뉴스 - 최신 데이터 인프라 이해하기 ) #1 기본 개념과 단어 설명 #2 데이터 소스(OLTP, CDC, ERP, CRM, Event Collector, Segment, Snowplow, Rudderstack) #3 - ETL/ELT 도구들(Fivetran, Stitch, Matillion, Panoply) #4 - 데이터 모델링과 워크플로우 매니저(dbt,Airflow,Dagster,Prefect) #5 - Spark, Python, Hive #6 - Kafka, Pulsar, Kinesis #7 - Kafka Streams, kSQL, ksqlDB, Apache Flink, Spark Structured Streaming 데이터 인프라의 변화(영상 내용 참고자료) 데이터 인프라 구축..