DE101 — Data Engineering for Beginners
- 站点:https://de101.startdataengineering.com/
- 代码:https://github.com/josephmachado/data_engineering_for_beginners_code
- 角色:基础阶段
- 状态:建议作为 Zoomcamp 前的热身(零基础时)
是什么
面向想转 DE、但被工具淹没的人的入门书。强调 why + how,不是只罗列工具。
预期收获
- DE 栈的基本概念
- 常用工具体验:SQL(含 Spark)、Python、PySpark DataFrame、Docker、dbt、Airflow
- Capstone:把工具串成一个端到端项目
怎么用
- 按章节顺序读
- 自己敲代码(作者建议入门阶段少靠 LLM 直接交答案)
- 做章末练习
进度
- 开篇 / DE 使命与基础概念
- SQL / Python 相关章
- Docker
- 数据模型 / 仓
- PySpark
- dbt
- Airflow
- Capstone
学习笔记
(跟课过程中往下记)