python爬虫工程师

工作职责:

1、负责多平台信息爬取和页面内容的提取分析，负责破解各类反爬机制；

2、负责网页的数据抓取和爬取链路优化（包括逆向分析、脱壳、加密参数破解、抓取攻防等），提升抓取能力；

3、研究爬虫策略和防屏蔽规则，解决封账号、封IP、验证码、页面跳转等难点，提升网页抓取的效率和质量；

4、对于简单的爬取页面，使用公司的工具进行信息的爬取，以及参与部分数据ETL工作。

任职资格:

1、1年以上python爬虫经验，计算机相关专业，有金融资讯数据经验优先；

2、熟悉掌握至少一种开源爬虫框架（scrapy、appium、selenium等）；

3、精通动态网页抓取、浏览器模拟抓取、APP抓取等技术，熟悉使用fiddler或其他抓包工具。；

4、具有js逆向，app逆向相关经验。熟悉jshook原理,熟悉各种反爬风控常见手段；

5、具有团队合作精神，有责任感，对工作认真负责，有较强的协调和沟通能力。

公司地点：上海浦东新区东方国际科技大厦7A