职责描述:
1、智能工厂数据治理项目需求调研、制定调研计划确定调研内容;
2、参与项目需求评审、针对需求设计切实可行的解决方案;
3、撰写汇报材料、参与项目验收汇报工作;
4、负责协调解决项目实施过程中遇到的技术问题;
6、公司安排的其他工作;
任职要求:
1、3年以上IT系统开发相关经验、1年以上数据治理相关工作经验;
2、精通数据治理相关知识、包括数据标准管理、数据质量管理、元数据管理等;有数据治理咨询类项目经验、或设计、实施过数据管理、数据治理平台;
3、精通Java或Scala语言、熟练使用SQL、熟悉Linux操作系统;
4、实际参与过离线数据、实时数据处理相关项目;
5、熟悉常用的开源分布式计算存储相关技术;如YARN、Spark、Flink、Zookeeper、HDFS、Hbase、Hive、Redis、Flume、Kafka、Sqoop等 根据实际项目掌握即可、
6、熟悉数据同步、包括实时同步、直连同步、文件同步、日志同步;
7、熟悉数据库、分库分表方案;
8、熟悉开源调度系统;
9、对数据框架/数据仓库/中台/数据湖/数据治理/BI相关内容有较好理解;