1、负责数据治理项目的实施工作,包括数据采集、清洗、结构化,主题数据设计、模型构建,样本数据标注、构造等环节;
2、负责数据仓库设计、建模、数据ETL,对内及对外提供高质量的数据服务;
3、负责数据治理相关的用户交流、沟通,完成业务梳理,制定技术方案并实现;
4、参与制定数据集市规范、ETL规范等技术规范;
5、参与数据应用系统需求分析、建模、开发;
6、参与数据治理&管理体系规划、体系建设、培训宣传等工作。
专业技能:
1、熟悉数据仓库、理解维度建模,了解多项大数据处理/分析相关的工具/框架,如Hadoop、 MapReduce、Hive、Storm、Spark、kafka及HBase等;
2、熟悉主流数据库技术,如Oracle、Sql Server、MySQL及PostageSQL等;
3、了解ETL架构,了解日常作业的部署和调度,熟悉ETL开发工具,如Datastage、Cognos及Kettle等;