资深大数据工程师
工作职责:
1、理解大数据治理平台业务需求,负责埋点和数据集成架构设计;
2、参与包含海量数据的实时计算、数据存储、DMP等平台的构建与维护;
3、根据业务要求,确保系统架构持续演进的同时,保证系统的高运行效率和高鲁棒性;
4、参与海量数据导入、分布式存储、计算引擎及混合云部署的技术调研与攻关;
5、承担部分AIGC算法基础架构搭建与工程化工作。
岗位要求:
1、计算机或相关专业毕业,本科及以上学历,3年以上Java大数据编程经验;
2、熟练掌握java/python,熟悉k8s,具有算法工程经验更佳;
3、熟悉Spring/MyBatis/Netty/Nginx等Web开源技术和框架;
4、精通数据库设计(MySQL优先),优秀的SQL编写及调优能力,熟悉常见NoSQL存储,如Hbase/Kudu/Redis/MongoDB等;
5、有大数据实时系统相关开发经验,熟悉Flume,Flink、Spark、Kafka、数据湖相关技术和阿里云大数据组件如dataworks,hologres;
6、能快速学习和实践新知识,不惧怕技术挑战;
7、有团队协作精神,注重沟通与传达。