岗位职责:
1、利用爬虫相关技术,安全、合规地抓取非敏感信息;
2、参与分布式爬虫和数据采集系统的架构设计和开发;
3、设计爬虫策略、防屏蔽规则,对抗安全产品,提升抓取的效率和质量;
任职要求:
1、两年以上相关工作经验,有爬虫和反爬虫的实战经验;
2、精通JS混淆,逆向,了解常用验证码识别技术,防封技术;
3、有机票行业数据抓取经验者优先,具备成功处理大规模数据抓取的经验。