职位描述:
1、 负责数据集成、ODS/数仓/数据集市/数据分析应用建设工作;
2、 参与数据全生命周期中 采集、治理、管理、服务、运营等、、相关通用能力的研发、封装、沉淀及文档编写等工作;
3、 负责数据需求收集与分析、源系统数据探索、完成系统数据模型及应用模型设计、开发、自测及上线部署;
4、 负责数据模型设计、开发工作、对存储过程、函数、ETL进行开发、调试和维护、进行SQL语句的改写与性能优化;
5、 负责全链路的数据采集、入库、加工等工作、保证数据的准确性、及时性;
6、 参与离线数仓、实时数仓的搭建、建设各业务领域的数据集市;
7、 数据质量稽核、问题分析及处理、优化数据处理程序;
职位要求:
1、 计算机、数学及相关专业、本科以上学历、三年以上工作经验;
2、 熟悉数据仓库管理理论、了解元数据管理、血缘管理、质量管理等
3、 熟悉SQL、能够编写高效SQL、存储过程、有基于ClickHouse/Hive/Hbase等应用经验者优先;熟悉使用ETL开发工具、数据模型设计工具
4、 熟悉数据同步工具 如Datax、Kettle、;
5、 有ETL开发能力、有SQL调优能力、合理安排任务调度;
6、 熟悉建模理论与方法、维度建模、以及不同行业的模型主题域、能够按照需求正确划分主题、产出概念模型、业务模型、逻辑模型等
7、 具有优秀的逻辑思维能力、能够对实际问题进行抽象、设计和编程、有良好的沟通协作及快速学习能力