先决条件: 无

您将学到什么

• 核心思想

  定义数据工程，并将其与数据科学、数据分析等相关职位区别开来。

• 数据生命周期

  了解数据生命周期所包含的阶段，从生成到存储和处理。

• 数据管道

  阐述数据管道的原理，包括ETL和ELT处理流程。

• 数据存储

  识别不同类型的数据存储方案，例如数据库、数据仓库和数据湖。

• 数据处理

  描述批量数据处理和流式数据处理之间的区别。

• 常用工具

  认识数据工程中常用的工具，包括SQL和版本控制。