数仓开发工程师

JobOverview:

1.数据平台高级研发工程师是大数据部门的核心岗位,承担基础组件的设计.开发等工作,为数据应用层提供坚实的基础,此岗位需要具备较强的coding能力,熟悉业界流程大数据相关组件,如Flink.Spark.Hive.Hadoop等,对OLAP有较深的理解和行业经验。

JobResponsibilitiesandDuties:

1.负责基础组件开发和维护,如:Flink.Spark.Hive等;

2.参与数据仓库架构设计和ETL任务的开发.调优.运维等工作;

3.参与数据治理,提升数据易用性及数据质量;

4.与开发工具.计算引擎.基础架构等兄弟团队紧密合作,探索.落地和推广降本提效的新技术方案;

5.理解并合理抽象业务需求,与业务团队紧密合作,发挥数据价值。

JobQualifications:

1.熟悉数据仓库实施方法论,了解数据仓库体系,并支撑过实际业务场景;

2.具备较强的coding和sql能力,熟悉hadoop生态中的常用组件和基本原理,了解数据倾斜等分布式场景常见问题的解决方案;

3.对数据敏感,认真细致,善于从数据中发现疑点;

4.善于沟通,主动性强,具备优秀的技术与业务结合能力,有较强的项目推进能力;

5.有EB级数据运维和治理经验者优先;

6.阅读过spark.flink.hive等基础组件的源码,对分布式理论有深入了解者优先。

公司地点:上海虹口区上海白玉兰广场办公楼56楼

公司简介:

职位发布者:汪先生

上海布沁网络科技有限公司

融资阶段:

公司规模:

相似职位: