高级大数据开发工程师

岗位要求

1.本科及以上学历,计算机.软件工程.统计学等相关专业;

2.熟悉SQL,Hiveql等,熟悉Python/hell等脚本语言;

3.熟练掌握Flink核心架构(JobManager/TaskManager)、状态管理(State Backends)、检查点(Checkpoint/Savepoint)及容错机制

4.熟悉Flink SQL/Table API,能基于Flink构建实时数仓和流批一体解决方案

5.精通至少一种编程语言(Java/Scala/Python),熟悉多线程、高并发编程;

6.熟悉大数据平台组件(CDH,HADOOP,KAFKA,HIVE,YARN,HDFS,SPARK,Flink)等,理解底层设计原理;

7.熟悉OLAP引擎(如Doris、Presto)、实时计算和批流一体化技术栈;

8.具备机器学习/数据分析经验者优先(如Spark ML、TensorFlow应用场景);

9.有较好的沟通交流能力,善于主动思考和较强的执行力;

岗位职责:

1.为涉及大数据技术的产品提供大数据服务,设计实现大数据应用业务

2.对现有大数据技术进行改进持续提升大数据服务支撑水平

3.负责数据分析项目数据开发和处理;

4.负责配合业务部门进行数据分析;

5.负责技术文档的撰写。

公司地点:上海上海浦东软件园祖冲之园Y1座

公司简介:

职位发布者:许

上海泽客商贸有限公司

融资阶段:B轮

公司规模:500~999人

相似职位: