职位描述:
1. 战略转化与规划:深度解读公司战略目标,精准识别其中的数据需求,制定与战略匹配的数据战略规划与解决方案,明确数据架构路线图,保障数据战略与公司整体战略协同共进。
2. 数据架构搭建与落地:依据公司业务场景及数据特性,设计并搭建适配的大数据架构,涵盖数据采集、存储、计算、分析、可视化等全链路环节。主导大数据平台选型与搭建,确保平台具备高扩展性、高可用性、高性能,推动架构方案落地实施,把控进度与质量,保障架构平稳运行。
3. 多源数据整合与联动处理:梳理公司各类数据资源,制定数据整合策略,打通业务端、财务、人资等多部门数据壁垒,构建统一的数据标准与规范,实现数据互联互通与高效共享。设计并开发数据整合流程与工具,完成数据抽取、转换、加载,保障数据在联动处理中的准确性与一致性。
4. 数据平台建设与维护:负责公司数据平台全生命周期管理,从需求调研、设计开发到上线运维。优化数据平台架构,提升数据处理效率与实时性,引入前沿技术,满足业务对数据快速响应需求。建立数据平台监控体系,及时处理平台故障与性能瓶颈,保障平台稳定运行。
5. 数据质量与安全保障:建立健全数据质量管理体系,制定数据质量标准与评估指标,通过数据清洗、校验、修复等手段,持续提升数据准确性、完整性、一致性。强化数据安全管理,制定数据安全策略,落实数据加密、访问控制、数据脱敏等安全措施,防范数据泄露风险,确保公司数据资产安全。
职位要求:
1. 学历与经验:计算机科学、数据科学、统计学等相关专业,985/211优先,本科及以上学历。8 年以上大数据领域工作经验,其中 3 年以上大数据架构师岗位经验,有大型企业数据架构搭建与多源数据整合项目经验者优先。
2. 技术能力
- 具备扎实的编程功底与代码优化能力。
- 精通 Hadoop 生态体系(HDFS、MapReduce、YARN),熟练运用分布式计算框架进行数据处理与性能调优;熟悉数据采集工具,以及数据存储技术。
- 深入理解数据仓库建模方法,如维度建模、范式建模,具备丰富的数据仓库设计与开发经验,熟练复杂数据查询与分析。
- 熟悉分布式系统原理,掌握 CAP 理论、数据一致性与分布式事务处理机制,具备分布式系统架构设计与性能优化能力。
- 掌握数据治理方法与工具,熟悉元数据管理、数据质量管理、数据标准管理流程;了解数据安全技术,能够制定并执行有效的数据安全策略。
3. 业务理解与沟通能力:具备敏锐的业务洞察力,能深入理解业务流程与需求,将业务问题转化为数据解决方案。优秀的沟通协调能力,能够与技术团队、业务部门、管理层高效沟通,推动项目顺利开展。
4. 学习与创新能力:持续关注大数据领域前沿技术与行业动态,具备快速学习与新技术应用能力。