高级爬虫工程师

岗位职责:

1、负责爬虫、逆向相关技术的研究和实现工作,比如APP逆向破解、小程序破解、分布式爬虫、验证码破解、反爬机制的研究等等。

2、设计爬虫策略和防屏蔽规则,提升抓取的效率和质量。

3、负责公司爬虫的核心算法以及策略优化,熟悉采集系统的调度策略。

4、负责现有部分爬虫的完善、维护工作,实时监控爬虫的进度和警报反馈,提升爬虫系统稳定性、可扩展性。

5、能独立解决实际开发过程碰到的各类问题。

任职要求:

1、本科及以上学历,计算机相关专业;

2、至少3年及以上爬虫逆向经验;

3、精通Python/Java语言至少一种,具有扎实的计算机基础和编程能力,熟悉常见的算法与数据结构,具有优秀的逻辑思维能力;

4、熟悉APP逆向、JS逆向、验证码破解、图像识别等技术;

5、熟悉常见的反爬机制,并对反爬具有一定的应对措施策略且有一定研究;

6、熟悉Mysql,redis,有过数据库调优和海量数据存储经验优先;

7、熟悉常用网络协议、数据存储和数据处理技术;

8、熟悉linux系统环境、命令,shell、python脚本编写;

9、有电商网站、电商APP采集经验优先;

10、对爬虫技术有专研精神;

11、能力特别优秀者薪资可面谈。

公司地点:成都希顿国际广场B座

公司简介:

职位发布者:胡惠文

成都映潮科技股份有限公司

融资阶段:不需要融资

公司规模:100~499人

相似职位: