工作内容:
1、根据工作安排负责相关数据的自动化采集抽取及清洗工作;
2、参与分布式爬虫架构设计及研发;
3、负责分析数据需求,快速确定数据采集方案按时交付结果;
4、维护数据增量,保证数据质量。
任职要求:
1、熟悉python,scrapy等主流爬虫框架;
2、熟悉js逆向,熟悉html,css;
3、理解分布式;
4、常用数据库mongodb,redis等。
5、年龄要求28岁以下,统招本科学历,有至少三年以上经验