岗位职责:
1. 负责爬虫系统的架构设计与研发工作；
2. 负责WEB和移动APP的内容抓取、解析，存储等模块建设，构建统一的爬虫服务平台；
3. 负责建设爬虫的监控和报警子系统。
任职资格:
1. 本科及以上学历，计算机相关专业；
2. 1年以上爬虫开发经验；熟悉网络编程，理解爬虫原理及相关技术；
3. 熟悉python/javascript/java等语言，熟悉linux开发环境和常用命令；
4. 熟悉scrapy/selenium+webdriver等爬虫框架；
5. 熟悉html/css/xpath等常用web技术，精通正则表达式；
6. 了解反爬技术，有逆向app经验优先考虑；
7. 了解搜索技术，有java开发经验者优先考虑；
8. 良好的学习能力，善于分析和独立解决问题；
9. 具备良好的团队协作意识。