岗位职责:
1、负责数据平台整体架构的设计和构建,确保数据架构满足业务需求;
2、负责制定元数据、数据资产、离线数据/实时数据的采集,编排等规范定义;
3、与数据分析师合作推动数据为产品运营赋能,通过技术创新让数据为业务发展带来价值;
4、负责数据生产与治理领域的新技术研究、新技术孵化,助力数据平台的迭代升级
任职要求:1、计算机相关专业本科及以上学历,8年以上数据平台经验;
2、熟悉Hadoop生态体系,包括但不限于Hadoop、Hive、Spark、Flink、Kafka等产品;
3、有过Databricks Unity Catalog 的治理经验,有过Azure data factory,Azure Function 的开发经验;
4、有丰富的数据治理主导经验,如数据标准管理、数据源管理、数据模型管理、元数据管理、数据质量标准等方面;