岗位职责:
1.负责项目/产品中主题数据仓库 流程开发,搭建数据平台。
2.负责项目/产品中主题数据仓库的模型、API 接口及可视化应用的设计及开发工作。
3.负责跟进新技术,结合业务数据特点,探索新技术的落地应用。
4.负责项目/产品中 ETL 数据处理过程的监控和管理。
5.负责编写相关数据仓库、API 接口等文档。
6.完成领导交办的其他工作。
任职要求:
1. 计算机、应用数学或相关专业,统招本科及以上学历,3年以上大数据开发相关工作经验。
2. 熟练掌握Java、Scala、Python、Shell中一种或多种开发语言。
3. 熟练掌握Mysql、Tidb等关系型数据库以及Hadoop、HBase、Hive、Impala、Kafka等大数据基础组件,掌握Spark、Flink等主流框架使用,了解Mongodb、ElasticSearch等。
4. 具有实际大数据平台、数据仓库、数据集市相关项目规划与实施经验。
5. 熟悉数据仓库建模和ETL设计,了解数据中台、数据治理等技术体系规范。