岗位职责:
1、参与大数据相关新技术专项课题研究、组件选型、方案设计;
2、负责大数据平台及应用技术攻关及架构优化,并根据业务需求持续优化平台性能、稳定性和可靠性;
3、协助和支持企业大客户大数据平台架构的设计与搭建、数据分析的模型构建与实现;
任职要求:
1、本科及以上学历,计算机相关专业,5年以上大数据相关工作经验,熟悉数据中台构建方法论,具有数据中台应用大型项目架构设计经验;
2、精通开源大数据技术栈,精通Flink/Hadoop/Hive/Impala/Kafka/ES/StarRocks等框架原理,善于容量规划、架构设计和性能优化并有丰富实战经验;
3、有超TB级别大数据处理实战经验,对离线/流式计算,存储引擎,资源调度等一项或多项有深入理解及实战经验;
4、熟悉大数据组件开发和性能优化,对数据库CDC实时同步有实战经验;
5、扎实的Java语言基础,熟悉Java开发工具和调试工具的使用;
6、有StarRocks、FlinkCDC、数据湖(hudi/Iceberg/Paimon)源码开发经验优先;
6、具有一定技术前瞻性及行业敏感度,持续跟进大数据发展趋势,并结合制造业应用场景进行落地;