ETL工程师

岗位职责:

1、参与公司大数据平台设计,主导数据接入,数据流水线、时序数据分析系统、数据服务等平台子模块的开发维护。

2、负责大数据平台组件间的集成、接口封装,相关的技术文档编写。

3、参与基于Hadoop生态系统的大数据平台相关组件技术调研,参与大数据平台组件选型。

4、实现数据产品研发工作,包括报表分析系统、元数据管理、数据质量管理、数据资产管理、数据服务接口等。

任职资格:

1、国家统招大学本科以上学历,计算机相关专业,具有扎实的计算机基础理论知识;

2、2年以上Java/Scala/Python语言应用开发经验,2年以上的大数据平台研发经验;

3、熟悉常用的面向对象设计模式和分布式系统开源框架;

4、熟悉linux开发环境及操作系统底层机制,并熟悉分布式系统底层实现机制;

5、熟悉Hadoop生态系统各组件技术架构,研究过Hadoop各组件源码或参与过Hadoop开源社区者优先考虑;

6、精通map/reduce应用框架,对流式处理框架hive/flink/spark stream至少熟悉一种

公司地点:北京建外Soho东区1503

公司简介:

职位发布者:白老师

北京数创领航科技有限公司

融资阶段:不需要融资

公司规模:20~99人

相似职位: