一、岗位职责:
1.设计、开发并维护大数据处理架构,涵盖Hbase、Hadoop生态系统。
2.负责对业务数据需求进行分析,制定数据分析模型和系统解决方案,规划和设计对应业务的分析数据模型和经营管理分析的指标体系;
3.负责支持Bl及报表展示、数据分析、数据挖掘以及其他商业价值实现相关的业务类需求;
4.开发和优化数据提取、转换和加载(ETL)流程,提高数据处理效率。
5.熟练运用数据分析工具和先进技术,进行精细的数据清洗、预处理以及建模工作,为深度的数据分析和挖掘提供坚实支持。
6.灵活利用Python语言进行复杂的数据预处理和特征工程。
二、任职要求:
1.本科及以上学历,计算机科学、信息管理、统计学或相关专业领域;
2.至少10年以上数据管理相关工作经验,有主导过大型企业或互联网公司数据中台或者大数据云平台经验者优先;
3.有丰富的数据治理实践经验,包括数据架构、数据治理、数据集成、数据分析和数据存储等;
4.熟悉各种数据库管理系统(如MySQL、PostgreSQL,MongoDB等)和大数据处理技术(如Hadoop、Spark、Flink等);
5.对AI算法有深刻的理解,逻辑思维强,有较强的分析和解决问题的能力,具备较强的业务敏感性和业务规划能力;
6.熟练掌握各种大模型平台技术,深入了解prompt、模型微调、插件开发等原理,能够根据业务需求灵活定制大模型相关解决方案者优先;
7.熟练掌握SQL,具备高级数据分析能力,能够使用Python、R等数据分析工具;
8.具备优秀的技术文档和汇报材料撰写能力,能够清晰、准确地表达技术细节;
9.具备良好的沟通和协调能力,能够与跨部门团队合作
10.熟悉运营商业务优先,拥有PMP证书优先。