大数据开发工程师

职责描述:

1、智能工厂数据治理项目需求调研、制定调研计划确定调研内容;

2、参与项目需求评审、针对需求设计切实可行的解决方案;

3、撰写汇报材料、参与项目验收汇报工作;

4、负责协调解决项目实施过程中遇到的技术问题;

6、公司安排的其他工作;

任职要求:

1、3年以上IT系统开发相关经验、1年以上数据治理相关工作经验;

2、精通数据治理相关知识、包括数据标准管理、数据质量管理、元数据管理等;有数据治理咨询类项目经验、或设计、实施过数据管理、数据治理平台;

3、精通Java或Scala语言、熟练使用SQL、熟悉Linux操作系统;

4、实际参与过离线数据、实时数据处理相关项目;

5、熟悉常用的开源分布式计算存储相关技术;如YARN、Spark、Flink、Zookeeper、HDFS、Hbase、Hive、Redis、Flume、Kafka、Sqoop等 根据实际项目掌握即可、

6、熟悉数据同步、包括实时同步、直连同步、文件同步、日志同步;

7、熟悉数据库、分库分表方案;

8、熟悉开源调度系统;

9、对数据框架/数据仓库/中台/数据湖/数据治理/BI相关内容有较好理解;

公司地点:青岛城阳区青岛高测科技股份有限公司A楼

公司简介:

职位发布者:张经理

青岛高测科技股份有限公司

融资阶段:

公司规模:1000~9999人

相似职位: