岗位职责
1. 参与大数据平台的整体架构设计与规划，搭建高可靠、可扩展的大数据平台基础框架，确保平台能够支撑大规模数据的存储、处理和分析。
2. 负责大数据平台核心功能模块的开发工作，包括数据集成、调度、数据资产管理、数据服务、指标体系等功能的实现，保障平台功能的完整性和实用性。
3. 持续优化大数据平台的性能，提升平台的数据处理效率和响应速度，降低资源消耗。
4. 及时解决大数据平台开发和运行过程中出现的技术问题，提供有效的技术解决方案，保障平台的稳定运行。
任职要求
1. 计算机科学与技术、软件工程、数学、统计学等相关专业，本科及以上学历。
2. 具备 3 年以上大数据平台开发经验，熟悉大数据平台的整体架构和技术栈，有完整的大数据平台开发项目经验者优先。
3. 熟练掌握 Java、Python 等至少一种编程语言，具备良好的代码编写习惯和编程能力，能够编写高效、可维护的代码。
4. 熟悉 DolphinScheduler、Spark、Flink、Hive、HBase、Elasticsearch、Doris等大数据生态系统组件，深入理解其原理和应用场景，能够熟练运用这些组件进行大数据平台的开发和优化。
5. 了解数据仓库、数据湖、流计算、批处理等大数据处理技术，掌握数据建模、ETL 等数据处理方法，能够根据业务需求设计合理的数据处理流程。
6. 具备良好的沟通能力和团队协作精神，能够与不同部门的人员进行有效的沟通和协作，共同推动项目的顺利进行。
7. 对新技术有强烈的学习兴趣和探索精神，能够快速学习和掌握新的大数据技术和工具，不断提升自己的技术能力。
8. 有云计算平台（如 AWS、Azure、阿里云、腾讯云等）使用经验，熟悉容器化技术（如 Docker、Kubernetes）者优先。
9. 有数据安全、数据治理相关经验，熟悉数据加密、权限控制、数据质量监控等技术者优先。