工作职责:
1、负责数据仓库的整体架构设计与开发,包括数据模型设计、ETL流程开发与优化;负责数据仓库的建模工作,设计和实现复杂的数据结构,满足多用户需求;
2、构建数据指标体系,参与数据治理,提升数据质量;
3、负责数据的提取、转换和加载(ETL)工作,从多种数据源中提取数据,熟练使用ETL工具(如Kettle、DataStage等)进行数据处理;
4、协助数据分析团队进行数据挖掘和分析,为业务决策提供数据支持;构建数据应用,解决数据分析、业务决策等场景中的数据挑战;
5、关注数据存储技术的最新动态,评估新技术的适用性;推动数据仓库技术的创新和优化。
任职资格:
1. 本科及以上学历,计算机、软件工程、数据分析或相关专业出身,2-3年工作经验,具备极强的问题解决能力;
2. 精通数据仓库理论体系,对分层设计、维度建模等有深刻的认识和实战经验,熟悉不同建模方法的优劣;
3. 积极主动贴近业务,有良好的沟通协调能力,数据敏感度高,能够快速理解业务模型及数据模型;熟练掌握SQL/HQL/Spark SQL开发及优化技能,快速ETL实施能力,对SLA有较深刻的认识及强烈的责任心;
4. 熟悉大数据生态技术栈,具备较丰富的Hadoop,Hive,Spark,Flink,DataWorks等大数据工具应用和开发经验;
5. 掌握Java, Python等至少一门语言,有MapReduce项目开发经验,熟悉Azkaban等任务调度工具;
6. 熟练使用git,有多人项目合作开发经验;
7. 有数据中台建设经验优先。有数据分析能力、指标体系搭建或BI相关经验优先。有互联网工作经验优先。