岗位职责：
1.负责开发和优化大模型训练系统，使用混合并行、自动并行和通信优化等技术，提高内部模型训练的速度和效率；
2.设计并实现高效的大模型训练工具，紧跟模型架构的演进，不断优化并行训练策略，以满足公司业务发展的需求；
3.深入进行大模型训练的性能分析，精准识别并解决训练过程中的性能瓶颈，确保训练效率最大化，分挖掘硬件资源的潜力。
职位要求：
1.拥有计算机科学或相关领域的硕士或博士学位，对分布式系统、机器学习系统有深入的理解和实践经验
2.熟悉常见的大模型训练细节，如LLamA、ChatGLM、BaiChuan、GPT等
3.精通PyTorchFSDP、DeepSpeed或Megatron-LM等任一分布式训练框架，优先考虑有大规模预训练模型系统优化经验的候选人
4.良好的数据分析和问题解决能力，良好的业务理解能力
5.紧跟学术发展并能够复现相关论文
瀚博半导体是一家高端GPU芯片提供商，成立于2018年12月，注册地在中国上海。瀚博半导体为人工智能核心算力和图形渲染、内容生成、AIGC提供全栈式芯片解决方案。瀚博秉持“为数字和像素世界提供浩瀚算力”的使命和愿景，潜心研发核心技术，目前拥有自主研发的核心IP以及两代GPU芯片，提供适用于通用AI计算和图形渲染的GPU产品。
瀚博凭借前沿的自主原创架构、强大的软硬件融合开发能力以及丰富的设计经验研发出高质量的GPU产品，瀚博两代芯片现已量产并商业化落地，赋能人工智能与渲染产业，助力大模型与生成式人工智能、智算中心、智慧工业、智慧交通、数字孪生、工业软件、云渲染等应用落地。
公司目前拥有500人以上的团队，研发人员占90%以上，超过80%员工具有硕士及以上学历。核心员工来自世界知名的高科技公司，核心团队拥有18年以上芯片与软件设计研发、管理和市场经验，包括业界第一颗7nmGPU在内的100+款芯片流片、量产经验。公司现处于快速成长期，发展前景广阔，员工有很大的职业成长空间和福利待遇。
瀚博半导体2018年12月成立于上海。瀚博致力于自主研发世界领先的人工智能核心技术，专用芯片和平台，应用于边到云的人工智能产品。
创始团队来自国际知名半导体公司，拥有20年以上的相关芯片设计，团队管理及公司运营经验，曾经带领团队研发设计量产几十款芯片，在全球市场处于领先地位。创始团队在人工智能，SOC芯片设计，系统集成，低功耗设计具备丰富的经验，同时拥有全球领先的芯片定义和设计、稳定高效且极具创新的设计开发流程，及先进的公司管理运营理念。
公司研发团队包括有国内外世界级别的人工智能及芯片设计专家。他们成功研发了无数个世界领先的人工智能和GPU大型芯片，累计出货量超一亿片芯片。
公司凝聚着一批充满激情和创造力，且具有丰富设计经验的半导体及人工智能的顶尖人才，核心研发团队全部来自于国内外知名半导体公司的设计研发骨干，其中超过90%为硕士及以上学历。团队致力于将公司打造成为中国芯片设计的标杆企业，力争成为全球芯片设计的领导者。公司现处于快速成长期，发展前景广阔，员工有很大的职业成长空间和福利待遇。
主要福利可能包括：
- 五险一金
- 补充公积金
- 员工补充医疗保险、双子女医疗保险
- 股权激励计划
- 全面健康管理、健身活动