职位描述:
岗位职责:
1、负责爬虫、逆向相关技术的研究和实现工作,如小程序破解、分布式爬虫、验证码破解、反爬机制的研究等;
2、设计爬虫策略和防屏蔽规则,提升抓取的效率和质量;
3、负责公司爬虫的核心算法以及策略优化,熟悉采集系统的调度策略;
4、负责现有部分爬虫的完善、维护工作,实时监控爬虫的进度和警报反馈,提升爬虫系统稳定性、可扩展性;
5、能独立解决实际开发过程碰到的各类问题。
职位要求:
任职要求:
1、本科及以上学历,计算机相关专业,4年及以上爬虫逆向经验;
2、熟练使用Git、Devops等平台工具,熟悉JS逆向、验证码破解、图像识别等技术;
3、精通Python语言,具有扎实的计算机基础和编程能力,熟悉常见的算法与数据结构,具有优秀的逻辑思维能力;
4、熟悉常见的反爬机制,并对反爬具有一定的应对措施策略且有一定研究;
5、熟悉Mysql,redis,有过数据库调优和海量数据存储经验优先;
6、熟悉常用网络协议、数据存储和数据处理技术;
7、熟悉linux系统环境、命令,shell、python脚本编写;
8、对爬虫技术有钻研精神。
中科创达软件股份有限公司(股票代码:300496)是全球领先的智能平台技术提供商。自2008年成立以来,公司致力于提供卓越的智能终端操作系统平台技术及解决方案,助力并加速智能手机、智能物联网、智能汽车等领域的产品化与技术创新。作为一家技术驱动型企业,中科创达不但坚持自我创新,也注重扶持创新。一方面与高通、英特尔、微软等分别运营了多个联合实验室,为元器件适配和终端测试提供先进的资源和技术支持;同时与ARM、高通分别成立合资公司——安创空间加速器、重庆创通联达,为智能硬件企业及创新创业者提供产业平台,推动智能硬件技术发展;并与临空投、天使基金、北极光共同成立产业投资基金,整合资源助力创新。
目前,中科创达拥有一支对操作系统技术有深入理解的国际化专业团队。公司总部位于北京,分子公司及研发中心分布于全球19个地区。包括深圳、上海、南京、成都、重庆、武汉、西安、沈阳、大连、台北、香港、美国硅谷、圣地亚哥、日本东京、韩国首尔、芬兰赫尔辛基、印度海得拉巴、马来西亚槟城、保加利亚索菲亚。可以为全球客户提供便捷、高效的技术服务和本地支持。公司链接及简介:http://www.thundersoft.com/