1. 参与公司大数据平台的设计与开发,实施数据仓库全链路优化,确保数据的高效流通和价值挖掘。
2. 根据业务需求,负责设计和开发高效、可扩展的数据仓库解决方案,包括数据采集、清洗、转换、存储、分析等全流程。
3. 维护并优化现有数据仓库系统,提升系统的稳定性、扩展性及处理性能。
4. 与业务和产品团队紧密合作,深入理解数据需求,提供数据支持及技术保障,确保数据驱动的决策和产品优化。
5. 持续研究大数据领域的前沿技术,推动新技术的落地应用,提升数据仓库架构的整体效率。
任职要求:
1. 计算机相关专业,本科及以上学历,具备3-5年数据仓库开发经验。
2. 熟练掌握SQL,精通数据仓库建模,有丰富的ETL开发经验。
3. 熟悉主流大数据技术栈,具备Hadoop、Hive、Spark等开发经验,熟悉HDFS、MapReduce等相关技术。
4. 精通Java或Scala开发,熟悉Python、Shell等脚本语言。
5. 具备数据仓库系统架构设计及优化经验,能够针对大数据量、高并发场景提供稳定、高效的解决方案。
6. 有数据治理、数据质量管理相关经验者优先。
7. 具备较强的沟通能力、团队合作精神及自我驱动能力,能够快速适应和解决复杂技术问题。
优先条件:
● 有大数据平台相关开发经验,涉及数据采集、用户画像、AB测试等业务场景者优先。
● 具备分布式系统及集群管理经验者优先。