负责带领BigData团队,开发业界领先的快速、高效、易用、低成本的数据湖、大数据平台,包括设计、开发、优化所有核心服务和系统,开发和维护大数据收集、入湖、处理、索引的所有服务、ETLs、pipelines等,并持续优化大数据平台的计算和存储效率。
职责:
1、开发快速高效的无人驾驶数据收集和监控系统
2、开发高效低成本的数据湖管理PB级无人驾驶数据
3、定制开发spark底层组件,持续优化sparkIO和运算的性能
4、构建pipeline用来改进数据处理的效率
5、开发大数据平台管理工具,构建大数据平台产品
6、设计和开发基于k8s的微服务架构
7、持续改进和优化spark调用c++的性能
要求:
1、具备较强的分析和解决问题的能力,掌握在linux生产环境下的调试和性能分析技术
2、熟悉基本的数据结构和通用的算法,熟悉常见的设计模式
3、良好的编程习惯,遵守代码规范,测试驱动开发
4、5年以上java开发经验,熟悉python和c++
5、3年以上大数据平台和数据湖开发经验,熟悉kafka,spark,elasticsearch,flink等系统的架构
6、有aws上的开发经验,熟练掌握无服务器技术
7、有spark调用c++性能改进和调优经验者为佳
文远知行是全球领先的L4级自动驾驶科技公司,已经在全球26个城市开展自动驾驶研发、测试及运营。文远知行致力于开发安全可靠的无人驾驶技术,其商业化应用场景覆盖智慧出行、智慧货运和智慧环卫。
文远知行自动驾驶技术和商业化进程在全球居于领先地位,已进入自动驾驶商业化运营阶段,形成自动驾驶出租车(Robotaxi)、自动驾驶小巴(Robobus)、自动驾驶货运车(Robovan)、自动驾驶环卫车(Robosweeper)、高阶智能驾驶(Advanced Driving Solution)等五大产品矩阵,提供网约车、随需公交、同城货运、智能环卫、高阶智能驾驶解决方案等多种服务。
文远知行成立于2017年,在中国广州、北京、上海、深圳、无锡、郑州、南京、武汉、安庆、圣何塞、阿布扎比、新加坡等地设有办公室,在技术研发、商业化和企业管理等方面都拥有丰富的海内外实践经验。文远知行已与多家全球顶级主机厂和一级供应商达成战略合作伙伴关系,包括雷诺日产三菱联盟、宇通集团、广汽集团、博世等。
更多信息请访问:http://www.weride.ai,或关注官方微信号:文远知行文远知行是全球领先的L4级自动驾驶科技公司,已经在全球26个城市开展自动驾驶研发、测试及运营。文远知行致力于开发安全可靠的无人驾驶技术,其商业化应用场景覆盖智慧出行、智慧货运和智慧环卫。
文远知行自动驾驶技术和商业化进程在全球居于领先地位,已进入自动驾驶商业化运营阶段,形成自动驾驶出租车(Robotaxi)、自动驾驶小巴(Robobus)、自动驾驶货运车(Robovan)、自动驾驶环卫车(Robosweeper)、高阶智能驾驶(Advanced Driving Solution)等五大产品矩阵,提供网约车、随需公交、同城货运、智能环卫、高阶智能驾驶解决方案等多种服务。
文远知行成立于2017年,在中国广州、北京、上海、深圳、无锡、郑州、南京、武汉、安庆、圣何塞、阿布扎比、新加坡等地设有办公室,在技术研发、商业化和企业管理等方面都拥有丰富的海内外实践经验。文远知行已与多家全球顶级主机厂和一级供应商达成战略合作伙伴关系,包括雷诺日产三菱联盟、宇通集团、广汽集团、博世等。
更多信息请访问:http://www.weride.ai,或关注官方微信号:文远知行******