数据平台Leader/架构师

职位描述

负责带领团队进行公司数据平台的建设,为端到端算法的迭代提供有力的数据支撑;

建设自动驾驶数据湖仓,为数据的管理、处理及应用提供坚实的数据基座,并进行数据质量及成本方面的治理;

构建大规模数据的批处理能力,并借助AI建立更加完善的数据检索、挖掘、自动化标注等能力。

深入了解用户使用数据的业务流程,构建高效、稳定、易用的数据平台;

职位要求

计算机或相关领域211本科及以上学历,至少5年以上的后端开发和大数据处理经验,有自动驾驶数据闭环相关的实际经验

熟悉数据仓库理论方法及ETL相关技术,具备良好的数据架构设计能力,熟悉Hudi、DeltaLake、Iceberg等至少一种数据湖技术,有生产落地经验者优先

了解主流大数据处理框架及技术,如 Hadoop/Spark/Hive/Flink等,对大数据系统存储技术有一定了解,具备Elasticsearch、分布式文件存储(如HDFS/NFS) 和对象存储 (如S3/MinIO)使用开发实践经验

对Web Service/K8S等跟后端服务和工作流相关的框架开发有一定的实践经验

熟悉关系型数据库和 NoSQL 数据库(如MySQL、PostgreSQL、Doris、Cassandra等),具备海量数据管理和调优经验

对GPU解码/推理等GPU计算优化有实际的实践经验

具备2年以上的团队管理经验,具有较强的自驱能力和项目推进能力以及团队合作能力,对新技术保持热情和关注,具有较强的学习能力,愿意接受挑战和面对变化

公司地点:上海闵行区维璟中心C座五楼

公司简介:

鉴智机器人专注于以视觉3D理解为核心的下一代自动驾驶解决方案的研发。已经组建300人全栈团队,核心团队均来自国内外顶级AI算法、芯片、自动驾驶公司以及主流Tier 1和主机厂。于北京、上海、杭州、苏州、广州均设有研发中心。

职位发布者:宋先生

北京鉴智机器人科技有限公司

融资阶段:

公司规模:20~99人

相似职位: