岗位职责:
1.负责数据平台ETL概要及子模块设计、详细设计、数据处理设计、调度设计等。
2.负责各种业务数据的ETL任务及部署和管理等。
3.负责大数据平台的技术架构设计和开发工作。
4.负责海量数据处理性能、分布式集群稳定性的调优工作。
5.充分理解需求文档,交付高质量的开发代码和数据内容并完成自测。
6.独立完成相关技术文档编写。
7.独立完成数据对接、报表开发、指标设计与统计工作。
任职要求:
1.本科以上学历且5年以上相关工作经验。
2.精通SQL的编写与调优。
3.精通保险十大主题模型,熟悉基础层、应用层。
4.熟悉LinuxSell等脚本语言、熟悉Linux常用命令。
5.熟练使用Teradata、Postgre、Mysql等其中至少1种数据库。
6.熟悉Hadoop相关组件如Hive、HDFS、Yarn、Zookeeper的原理及使用方法。
7.熟悉保险业务、保险数据开发,有Spark、Flink等离线或者实时数据开发经验优先。