岗位职责:
1.基于阿里云大数据平台进行数据仓库的建设。
2.负责大数据相关组件的架构规划,设计,运维,治理,保障平台服务的可用性和稳定性。
3.负责数据模型的设计,ETL实施,ETL性能优化以及相关技术问题的解决。
4.与业务团队紧密合作,理解业务需求,提供数据解决方案。
5.根据业务需求进行数据建模和指标计算,为决策提供数据依据。
6.参与数据治理工作,提升数据易用性及数据质量。
岗位要求:
1.本科及以上学历,计算机、软件工程等相关专业。
2.具有4年以上大数据平台的开发经验,至少1年阿里云大数据开发经验。
3.熟练掌握阿里云的大数据产品和服务,如 MaxCompute、DataWorks、Flink、Hologres 等。
4.熟悉Sqoop、DataX等数据迁移工具。
5.有日均TB及以上数据规模处理经验。
6.熟悉 Hadoop 生态全家桶, 熟悉Spark、 Presto 、 Doris 等大数据处理或即席查询框架,具备扎实的大数据基础知识。
7.掌握 Java、Python、Scala、SQL 等编程语言,具备良好的编程习惯和代码规范。
8.具有良好的文档化习惯,工作内容可量化。
9.具有良好的问题解决能力和团队协作精神,能够承受工作压力。