数据工程

数据工程是构建和维护数据基础设施的专业领域，涵盖数据采集、清洗、转换、存储和调度等全链路工作。现代数据工程师需要熟练运用 Apache Airflow、dbt、Spark、Kafka 等工具，以及 Snowflake、BigQuery、ClickHouse 等云数仓产品。本分类提供的晶体专注于帮助工程师快速完成 ETL 管线设计、DAG 编写、数据质量检测规则生成、Schema 迁移脚本、数据血缘文档等日常高频任务。通过 AI 驱动的晶体，工程师可以将手工编写重复 SQL 和样板代码的时间大幅压缩，专注于业务逻辑设计与系统架构决策。