【岗位职责】
1、大数据模型设计,数据治理设计;
2、大数据应用开发,应用需求沟通,报表开发,指标应用,标签应用;
3、大数据接口服务,数据中台运营,资产运营;
4、大数据相关技术架构,方案设计及落地实现;
5、大数据平台数据运维问题解决,性能调优,调度优化。
【任职要求】
1、本科及以上学历,计算机、数学、统计学相关专业;
2、熟悉Hadoop、Spark、Flink、Hive、Hbase、impala、Clickhouse、zookeeper、kafka、Trino、SeaTunnel等大数据技术至少3种,并能结合业务场景进行架构设计;
3、具有较强的编程能力,至少熟练使用Python/Java其中的一种开发语言;
4、熟悉高可用、高并发、高性能的分布式系统的设计及应用,有丰富的线上调优经验;
5、熟悉springboot、springcloud、mybatisplus进行服务接口的设计及开发;
6、熟练编写shell脚本以及linux服务器操作;
7、熟练mysql、oracle、sqlserver等关系性数据库的应用;
8、熟悉CDH、CDP或其他大数据平台,有很强的运维定位错误能力;
9、熟悉常用的调度工具Azkaban/airflow。