职位描述
1、负责基于Hadoop/Spark/Flink/Hive等生态系统的大数据平台的架构设计、技术选型、搭建、开发、管理、监控和性能调优;
2、保证大数据集群高效稳定运行,对数据应用提供数据存储、查询引擎、实时计算、元数据管理的架构设计及落地;
3、跨团队/部门协作,系统分析并解决各类大数据平台相关的运行或数据问题;
职位要求
1、3年以上的大数据研发经验,本科及以上学历;
2、熟悉JAVA/SCALA/C++至少一种,有扎实的开发功底,具备快速的问题定位能力;
3、对大数据基础架构和平台底层原理有深度理解和丰富开发经验(Hadoop/Hive/Hbase/Kafka/Spark/Flink等);
4、对复杂系统的性能优化和稳定性提升有一线实战经验,具备相关产品项目应用研发经验;对开源社区有贡献者优先;
5、具有一定的项目规划和决策能力,善于捕捉业务需求、架构设计存在的问题,并给出有效的解决措施和方法。