职责描述:
1. 带领团队研发大模型训练和微调软件框架,跟踪面向大模型系统的性能优化技术;
2. 负责设计并研发用户友好的大模型算法开发部署组件,降低大模型开发门槛;
3. 负责优化大模型训练和微调系统性能,提供行业认可的大模型分布式训练解决方案。
任职要求:
1.研究生及以上学历,计算机/电子相关专业优先,5年(博士3年)以上分布式系统优化经验;
2.熟悉 C/C++ 和 Python具备系统软件开发架构能力;
3. 有Pytorch、TensorFlow或任意一种训练、微调平台的研发、优化或者模型训练经验;
4. 熟练掌握深度学习系统优化方法,有大模型训练和推理优化经验者优先;
5. 统筹协调能力强,有大型系统开发团队管理经验优先。
加分项:
1. 熟悉Ray,Deepspeed或Megatron-LM等大模型分布式训练框架的优先;
2. 熟悉计算机体系结构,有GPU优化或 RDMA通信优化经验的优先;
3. 有开发运营过开源软件或者为知名开源软件贡献过代码的优先。
:宁夏鑫源伟业企业管理有限公司成立于2020年03月27日,注册地位于宁夏回族自治区银川市金凤区阅海湾中央商务区团结路正丰金城广场B栋第7层708办公室,法定代表人为白正科。经营范围包括人力资源服务(不含职业中介活动);企业管理咨询服务;劳务分包;公关服务;法律咨询(不包括律师事务所业务);商务代办服务;会议服务;旅游咨询服务;研学旅游服务;软件开发、维护及销售;审计、财务咨询服务;留学中介服务。(依法须经批准的项目,经相关部门批准后方可开展经营活动)