岗位内容:
1.负责爬虫系统的设计和开发，实现高效稳定的数据采集和分析处理。
2.进行数据清洗、去重、格式化等操作，确保数据质量满足业务需求。
3.优化爬虫程序，提高爬取效率和成功率，降低误差率以及被封禁的风险。
4.有抖音、tiktok、temu等电商社媒平台的项目经验者优先。
任职要求:
1.熟练掌握Python语言，了解HTTP协议及常见的反爬虫算法。
2.具备良好的算法和数据结构基础，熟悉多线程、异步编程等技术。
3.精通各类数据库，如MySQL、Redis、MongoDB等，并有实际项目应用经验。
4.具备良好的英文阅读能力，能够阅读英文技术文档和资料。