大数据开发工程师

一、工作职责

1、 负责共享交换系统、任务调度系统、元数据管理系统、数

据标准管理系统、数据质量管理系统、数据开发系统、建模

平台、数据分析系统等开发经验;;

2、负责大数据产品的构建和完善;

3、根据业务需求对数据仓库进行建模、设计数据存储和集成

方式;

4、根据业务需求使用流计算工具进行数据加工程序的开发;

5、研究项目技术细节、编写相应的说明书;

6、有python、shell开发经验者优先

二、任职条件:

1、工作经验

1、熟悉Hadoop的生态系统、掌握Hive、Hbase、Spark、zookeeper等大数据组件、以及HDFS分

布式文件系统;

2、有Hadoop生态相关运维、开发、架构优化经验;

3、具备大数据集群故障排查能力、良好的技术敏感度和风险识别能力;

4、理解HDFS体系架构、并能熟练使用Hive、HDFS、python、Spark等工具;

5、能够使用大数据相关的技术 分布式存储、数据管理、数据处理、解决业务相关问题;

6、大数据资源评估

7、设计文档输出

2、学历要求:

本科及以上学历;

3、年龄要求:

45周岁及以下;

公司地点:天津滨海新区天津启明通海信息技术有限公司天津市滨海新区信环西路19号5号楼5701-6

公司简介:

职位发布者:曾经理

启明信息技术股份有限公司

融资阶段:

公司规模:1000~9999人

相似职位: