数据开发工程师

搭数据管道和数仓，用 Spark 处理大数据。

平时做什么

• 搭数据管道
• 处理大规模数据
• 做数据报表和分析

学习路线：16 个技能

• 编程入门
• Linux
• Python
• 数据结构
• Docker
• 计算机组成
• SQL
• 云平台
• 计算机系统
• 数据管道
• 计算机网络
• 操作系统
• 并发编程
• 分布式系统
• Kafka
• Spark 大数据

加分项

• 数据分析与埋点
• 数据可视化
• 时间序列

可以参考的开源项目

• Apache Airflow
• dbt