岗位要求:
1、负责政务数据的建模、数据开发、数据治理与核心模块数据开发,保障数据的时效性与质量;
2、负责大数据基础工具产品化,沉淀数据技术能力,提升数据管理的效率;
3、负责数据探查、数据抽取、数据加工、作业调度及日常数据监控的工作;
4、基于大数据平台,协助业务处理海量数据,解决疑难问题,发挥数据价值。
任职要求:
1、计算机科学或相关专业本科及以上学历,硕士优先;
2、从事数据仓库领域工作至少3年以上,熟悉数据合库模型设计方法论,并有实际的模型设计经验和ETL开发经验;
3、熟悉一个或多个开源组件,如:Hadoop/Spark/Flink/Hive/Presto/Hudi/lceberg/Doris/Clickhouse等;
4、熟悉一个或多个业内大数据平台产品,如:
CDP、CDH、AWS EMR、阿里云EMR、华为云MRS、字节跳动EMR等;
5、熟悉Spark、Flink、Hive、HadoopMapReduce集群原理,并有相关技术栈开发经验;
5、熟悉Linux操作系统,有扎实的数据结构、算法等编程基础,有分布式、高并发、高可用、高可靠等实践经验更佳。