JobOverview:
1.数据平台高级研发工程师是大数据部门的核心岗位,承担基础组件的设计.开发等工作,为数据应用层提供坚实的基础,此岗位需要具备较强的coding能力,熟悉业界流程大数据相关组件,如Flink.Spark.Hive.Hadoop等,对OLAP有较深的理解和行业经验。
JobResponsibilitiesandDuties:
1.负责基础组件开发和维护,如:Flink.Spark.Hive等;
2.参与数据仓库架构设计和ETL任务的开发.调优.运维等工作;
3.参与数据治理,提升数据易用性及数据质量;
4.与开发工具.计算引擎.基础架构等兄弟团队紧密合作,探索.落地和推广降本提效的新技术方案;
5.理解并合理抽象业务需求,与业务团队紧密合作,发挥数据价值。
JobQualifications:
1.熟悉数据仓库实施方法论,了解数据仓库体系,并支撑过实际业务场景;
2.具备较强的coding和sql能力,熟悉hadoop生态中的常用组件和基本原理,了解数据倾斜等分布式场景常见问题的解决方案;
3.对数据敏感,认真细致,善于从数据中发现疑点;
4.善于沟通,主动性强,具备优秀的技术与业务结合能力,有较强的项目推进能力;
5.有EB级数据运维和治理经验者优先;
6.阅读过spark.flink.hive等基础组件的源码,对分布式理论有深入了解者优先。