爬虫工程师

职位描述:

1.负责分布式网络爬虫系统的设计与开发

2.负责海量数据的爬取、清洗、解析、入库;

3.针对需要的数据,寻找网站或app内可用的接口

4.研究主流网站和app反爬机制,寻找应对方案;

5.不断的学习研究行业新技术,提升业务能力,并作团队分享

6.负责js、Android、IOS应用的逆向工作,能正向还原关键算法(* 高阶)

职位要求:

1.大专及以上学历,计算机相关专业;

2.熟悉linux开发环境,熟练掌握java或python编程语言,熟悉js语言;

3.熟练掌握http协议,xpath、csspath、正则表达式,有使用scrapy经验优先;

4.有rmysql、mongodb、redis、rabbitmq、kafka使用经验;

5.熟悉selenium或Puppeteerr,appium或airtest;

6.熟悉常用反爬手段及其对应方法、技巧;

7.有良好的责任心、沟通能力、学习能力、团队协作精神;

8.熟悉常用js防护手段及其对应的分析、调试技巧优先;

9.熟悉Android或IOS逆向技术优先;

公司地点:杭州西溪创智中心一号楼B2座7楼

公司简介:

“杭州灰豚科技有限公司”是一家数据公司。成立于2017年5月。2018年12月获得ProA轮3000万人民币投资。

旗下业务:灰豚数据(huitun.com)。品牌们都知道的全域媒体数据分析平台。合作伙伴包括东方甄选、小仙炖、如涵、李佳琦、谦寻、阿迪达斯等品牌和mcn公司。

旗下业务:店透视数据分析工具。是一款货架电商数据分析软件,服务于淘宝、京东、拼多多等传统电商平台百万商家,目前4个商家就有3个商家在用。国内知名企业海信、小米、斯凯奇、周大福、TCL、顾家、VIVO、INXX、意尔康、阿芙、百草味等均在合作。

旗下业务:MCN。签约主播、达人超过100人,其中全约优质艺人超20人,拥有众多金牌主播、超级大V和全网现象级红人,全平台粉丝总量超4000万粉丝。

公司创业团队来自阿里、网易、字节、滴滴等,具有清华大学、浙江大学、四川大学等计算机背景。

本公司不卷、没人管!老板看起来像程序员!公司做不好全是老板的锅(老板自己说的)!有趣的灵魂你就来,包起飞~

职位发布者:邓先生

杭州灰豚科技有限公司

融资阶段:

公司规模:20~99人

相似职位: