工作职责:
1、参与公司大数据平台研发工作、包括参与架构设计、技术选型等
2、参与数据仓库系统业务建模设计、完成数据抽取、数据处理和数据展示等开发工作
3、参与产品需求分析、应用设计、完成相关模块的代码开发及上线
4、基于Hadoop与Spark等、进行海量数据模型设计和数据开发、包括不限于数据提取、分析与结果整理
任职资格:
1、至少3年以上大数据开发经验、熟悉大数据常用组件的故障诊断及具备调优能力
2、熟悉大数据常用组件 HDFS、Yarn、Sqoop、Hive、Spark、Flink、Kafka、Doris、DolphinSchedule 等、
3、有基于Hadoop架构的数仓经验、有实时数仓建设经验、能够设计合理的离线数仓架构、实时数仓架构并推动落地
4、熟悉Linux开发环境、精通Java、Scala等编程语言、具备海量数据处理的开发能力
5、具有良好的沟通能力、组织能力及团队协作精神、有较强的问题分析和解决能力
6、熟悉报表开发工具、如使用帆软做报表开发