【岗位职责】
1、参与公司大数据方向的数据处理架构和模型设计,结合公司实际业务情况进行技术选型与迭代;
2、协助制定完成业务数据ETL流程及规范,并确保数据质量;
3、负责数据处理,协助团队解决开发过程中的技术难题;
4、参与数据平台产品的整体评估、设计、架构及关键模块的研发;
5、协助制定数据开发、主数据、数据质量、数据服务等规范;
6、完成上级领导临时交办任务。
【任职要求】
1、3年以上大数据开发的经验,大专及以上学历;
2、具有海量数据建模实践经验,有DW/BI架构体系建设经验;
3、精通SQL和Mapreduce、Spark、flink处理方法;
4、对大数据体系有深入认识,熟悉Kafka、Hadoop、Hive、HBase、Spark、Storm、 greenplum、ES、Redis等大数据技术并能设计相关数据模型;
5、对Hbase、mongo应用场景及性能调优熟悉;
6、很强的学习、分析和解决问题能力,可以迅速掌握业务逻辑并转化为技术方案;
7、熟练Python,java等至少一门语言;
8、拥有独立解决问题的能力。