【岗位职责】
1. 参与数据仓库、数据平台或数据湖的ETL开发与维护;
2. 负责数据处理流程的设计、开发与优化,确保数据质量与处理效率;
【任职要求】
1. 工作经验
• 具备2-3年数据仓库、数据平台或数据湖的ETL开发经验;
• 有数据仓库建模经验者优先;
• 有大模型(LLM)相关项目经验者优先。
2. 编程能力
• 熟练掌握Python开发语言,有一定的项目优化经验。
• 具备良好的代码规范意识和工程化能力。
3. 大数据处理
• 熟练使用 Hive、Spark 等大数据计算框架;
• 具备 Hive SQL(HQL)或 SparkSQL 的开发与调优经验。
4. 云平台经验(必须项)
• 熟悉 Azure 生态工具(如 Databricks、Data Factory、Event Hub、Function App);
• 有 AWS 或 Snowflake 平台项目经验者优先。
5. 综合能力
• 逻辑思维清晰,具备独立完成ETL流程设计的能力;
• 具备良好的沟通能力和团队协作精神。
6. 学历要求
• 本科及以上学历,重点本科院校优先。