岗位职责:
1. 根据分析师同事的需求定制爬虫方案.
2. 根据需求使用可视化爬虫工具或python scrapy编写爬虫脚本, 维护爬虫脚本的稳定运行.
3. 编写数据处理脚本按分析师需求自动定期导出发送数据汇总报告.
要求:
1. 有python scrapy 爬虫脚本编写经验.
2. 有mysql数据库使用经验, 能运用mysql脚本+Python+Excel 对数据进行分析汇总.
3.有网页逆向JS解析的经验.
4. 认真负责, 数据处理过程态度谨慎. 有良好的学习能力, 遇到困难能积极想办法解决.