岗位职责：
1、基于Hadoop、Spark、flink等，高并发进行海量数据模型设计、数据开发和数据治理;
2、负责基于开源框架的大数据的数据开发，包括数据采集、分析与结果整理;
3、负责分布式数据平台框架下的数据架构设计与开发，以及大数据平台的产品开发;
任职要求：
1、有5年或以上大数据开发经验;
2、具备实际的大数据业务开发经验，熟练Hadoop、Spark 、flink等大数据核心技术，针对不同量级的数据量进行配置调优和组件维护;
3、熟悉Hbase、Hdfs、MapReduce、Yarn、Zookeeper、Hive、Kafka等组件或技术，能阅读源码跟踪问题;
4、有较为系统的海量数据性能处理经验，能基于hive和mysql进行适当地sql优化;
5、熟练使用java的核心框架，如sparingcloud、springboot等;
6、熟悉数据仓库建模、有数据质量与数据治理相关经验优先;
7、良好的沟通表达能力和跨团队协作能力。