工作内容:
1.完成各层次数据模块的详细设计。
2.完成平台数据管理模块的程序设计与研发实现。
3.协助专业开发完成专业数据分类和数据定义。
4.负责算法模型从设计.实现到部署上线的全流程工作。
5.负责维护数据模型.分析模型及数据治理工作。
6.负责源系统的数据调研和分析,负责编写Mapping设计文档。
7.结合平台数据进行行业分析建模等工作。
8.负责完成相关技术文档的审核与编写
能力要求:
1、具有两年以上大型银行工作经验,熟悉银行业务,使用过powerdesigner、erwin等主流建模工具,熟悉常用的数据结构、算法以及数据建模理论,熟悉主流建模方法:范式建模、维度建模(星型模型.雪花模型),具有模型、功能开发经验,能够根据业务需求进行数据模型的调研、设计、开发及验证工作,并持续进行模型优化;
2、有过支撑每日亿级别数据的大数据平台建设经验,了解数仓实施方法论、了解数据仓库体系,并支撑过实际业务场景,负责数据模型架构的构建,建立数据抽取、清洗、校验等数据加工流程规范及olap多维数据分析模型;
3、熟悉hadoop生态圈的大数据基本组件hadoop、hive、pyspark、hbase等,能够进行hivesql调优、hadoop异常日志排查等;
4、熟悉oracle、postgreSQL、greenplum等关系型数据库,了解clickhouse、hbase等KV数据库,精通SQL语言,能够进行SQL调优;
5、熟悉至少一种编程语言,python、java、shell、perl等;
6、具备较强的数据分析,问题分析,逻辑思维能力,具有良好的沟通,团队协作能力;