岗位要求:
1、本科及以上学历、计算机相关专业优先;
2、精通大数据技术栈、包括hadoop、hive、spark、flink、kafka、hudi等;熟悉分布式计算和存储原理、具备良好的数据库 mysql、oracle、sqlserver、clickhouse等、和SQL知识;
3、熟练掌握Java或Python、Scala等编程语言、具备良好的编码习惯和代码质量意识;
4、具备大规模数据处理和数据仓库设计经验、熟悉ETL流程和数据清洗技术;
5、具备数据建模和数据分析能力、能够理解业务需求并进行数据分析和挖掘;
6、良好的沟通能力和团队合作精神、能够与业务团队和其他技术团队合作、理解和解决问题;
7、具备自我学习和持续创新的能力、能够跟上快速发展的大数据技术领域;
岗位职责:
1、负责设计和开发大数据平台及相关组件、包括数据采集、存储、处理和分析等功能;
2、负责设计和实现数据处理和清洗流程、确保数据的质量和准确性;
数据仓库设计和维护:负责设计和维护数据仓库、包括数据模型设计、数据集成和数据存储等方面的工作;
3、熟悉报表开发 FineReport、FineBI、Superset等、、根据业务需求进行数据分析和挖掘、提供数据洞察和业务决策支持;
4、优化大数据平台的性能、解决性能瓶颈和故障、并进行故障排查和修复;
5、跟踪大数据技术的最新发展、参与技术研究和创新、推动技术的应用和改进;
6、与团队成员合作、共同完成项目任务、并分享技术知识和经验、提升团队整体能力;