工作内容:大模型数据工程，负责数据采集，数据清洗，数据实验，以及数据平台构建，提供优质数据以提升大模型能力
任务要求:要求熟练使用python多线程/协程开发以及pyspark大数据开发、linux shell开发
特别说明:除了上述技能要求，额外有爬虫、大数据开发、机器学习、大模型部署经验优先