大数据开发工程师

岗位职责:

1、负责公司大数据平台的架构设计和优化,确保数据处理的高效性和可靠性。制定并推行大数据技术标准和规范。

2、评估和引入合适的大数据技术栈,推动技术创新和性能优化。解决大数据项目中的关键技术问题和瓶颈。

3、设计和实施大规模数据处理、存储和分析方案。优化数据处理流程和算法,提升数据处理效率。

4、对团队成员进行大数据技术的指导和培训,提升整体技术水平。组织和主持技术分享会,推动大数据技术知识的传播和交流。

5、参与大数据项目的需求分析、技术方案设计和开发计划制定。跟进项目进度,确保按时交付高质量的数据处理和分析系统。

岗位要求:

1、计算机科学、数据科学、软件工程或相关专业本科及以上学历。

2、5年以上大数据开发和架构设计经验。有大规模数据处理和分析项目的实际经验。

3、熟悉Hadoop、精通Flink等大数据处理框架。

4、熟悉Kafka、maxwell、canal等大数据生态系统组件。

5、有SQL和NoSQL、新SQL数据库(如MySQL、tidb、starrocks等)的实际使用经验。

6、熟悉大数据平台的性能调优和优化方法。

7、具备丰富的数据分析和建模经验,能够处理和分析大规模数据集。有实际项目经验。

8、良好的沟通能力和团队协作能力,能够与团队成员和其他部门有效合作。

9、具备良好的学习能力和技术敏感性,能够快速掌握和应用新技术。

公司地点:上海上海江桥万达广场

公司简介:

上海由也果信息科技有限公司成立于2015年,是专业的数字化服务提供商。致力于大数据和云计算基础设施等领域的研究和开发!

职位发布者:周三丰

上海由也果信息科技有限公司

融资阶段:

公司规模:20~99人

相似职位: