岗位职责:
1、负责大数据相关技术预研、组件调研等;
2、负责数据采集、清洗、转换和整合;
3、负责离线、实时数仓数据开发和数据建模等;
任职条件:
1、年龄:30周岁以下 特别优秀人员可适当放宽、;
2、学历:本科及以上;
3、专业:计算机等相关专业或从事计算机相关行业;
4、工作经验:
1、3年以上相关工作经验、有较强的学习能力;
2、掌握sqoop、ogg、datax、logstash、flink、starrocks、hive、spark、impala、oozie、海豚调度器等大数据相关组件;
3、精通java和scala开发语言、精通shell和python以及LINUX常用语句;
4、熟悉流批一体、Lambda、湖仓一体等常用数仓架构;
5、处理数据倾斜、数据清洗以及组件性能优化;
6、了解有色金属行业优先;