岗位职责:
1.管理爬虫团队完成公司的网页及APP数据采集工作,解决核心的反爬问题;
2.负责设计爬虫策略及反爬规则,提升数据采集效率、完整度和稳定性;
3.负责设计开发矩阵账号自动化运营系统。
岗位要求
1.2年以上爬虫开发经验,熟练掌握JAVA或Python开发,扎实的编程功底,熟悉常用的数据结构和算法;
2.熟悉各种爬虫技术:adsl拨号、正则表达式、脱壳技术、加密、图片破解、二维码识别、滑块验证码破解、httpClient、分布式爬虫调度、代理ip调度算法、配置化爬虫、授权爬虫;
3.有矩阵账号平台开发运营经验者优先;
4.有企业大数据相关经验者优先;
米塔碳(Meta Carbon) 智能科技有限公司是一家专注于人工智能技术及应用的科技企业。公司拥有一支专业的人工智能技术团队,其中国家级海外高层次人才计划2人,计算机科学博士12人。尤其在计算机视觉方面拥有十余年的工业界经验,主导或参与过“拍立淘”、“商品智能发布”、“淘系商品内容理解”等国际知名的人工智能产品的研发。在人工智能科学顶级学术会议上以第一作者累计发表论文50余篇,近五年谷歌引用次数累计5万余次。
我们是一家充满活力和创新精神的公司,团队成员自2019年开始致力于预训练相关的研究,同时在生成式人工智能技术体系上有着不错的积累。公司基于人工智能基础模型底座,在时尚制造、新能源气象、金融科技三大板块进行创新应用,孵化出面向行业的人工智能产品,致力于为客户提供最优质的服务。