岗位职责： 1、参与公司大数据平台整体架构的规划和设计； 2、参与大数据平台技术框架的选型和开发； 3、参与大数据平台的搭建，完成系统调试、集成与实施； 4、参与项目开发过程中的技术攻关及核心代码编写； 5、参与大数据应用开发，提供数据应用项目技术支持，参与数据应用类项目 任职资格： 1、 本科及以上学历，计算机相关专业，具有2年及以上的大数据平台搭建、架构和研发经验; 至少参与过一个完整的大数据开发项目； 2、 熟悉kimball数据维度模型，数据仓库分层模型 3、 熟悉Linux系统，熟悉shell编程，在操作系统、计算机网络和安全方面具备系统知识和相关经验 4、 熟练掌握Java/Scala，熟悉大数据离线计算生态体系，对Hadoop、HDFS、HBase、MapReduce、Kafka、Yarn、Hive、Spark等开源组件有研究，有海量数据处理经验； 5、 熟悉日志采集传输、消息队列相关技术，对Kafka、Flume、Fluentd等开源组件有深入研究 6、 至少熟悉一种编程语言（Python/Java/scala）。 7、 精通离线和实时数据处理流程，掌握离线数据处理框架，掌握实时数据处理常用技术工具等，有Flink项目经验； 8、 有数据仓库开发经验/BI系统开发经验者优先；
上海浦东新区张江电子港2号楼302-1
大数据开发工程师上海NaN数据采集15-25k12薪
天津所托瑞安汽车科技有限公司