岗位职责
1、负责公司的爬虫核心技术研究以及爬虫策略优化;
2、负责移动端数据获取开发与实现;
3、了解目前防爬策略以及应对方案;
4、有逆向开发或者研究经验。
任职要求
1.计算机、数学、统计学或相关专业本科及以上学历,具备 3 年以上数据相关工作经验,其中至少 2 年专注于爬虫开发与逆向工程领域。2.熟练掌握 Linux 平台的日常操作和开发环境搭建,精通 Python 或 Java 编程语言,能够灵活运用其进行爬虫开发、数据处理和逆向分析脚本编写。3.熟悉基于正则表达式、XPath、BeautifulSoup 等技术的网页信息抽取方法,能够根据不同的网页结构和反爬策略,快速调整抽取规则。深入了解常见的反爬机制,如 IP 封禁、验证码, js混淆等,并能运用代理池、和处理验证码4.精通逆向分析技术,熟练使用 IDA Pro 进行静态分析,包括反汇编、反编译、代码调试等操作,能够准确识别 APP 中的加密算法、数据传输协议和反爬逻辑。5.掌握 Frida 框架,能够编写 Frida 脚本进行动态分析和 Hook 操作,实现对 APP 运行时行为的监控、修改和数据拦截,绕过 APP 的反调试和反逆向机制。6.了解 Xposed 框架,具备使用 Xposed 模块进行 Android 系统层面 Hook 的经验,可用于突破 APP 的安全限制和数据采集。7.拥有丰富的安卓或 iOS 移动端 APP 逆向分析和数据采集经验,能够独立完成从 APP 脱壳、代码分析到数据提取的全流程工作。
北京新联财通咨询有限公司是一家专业的媒体资讯服务公司,为世界知名的跨国公司、国内大型企业、政府机构与组织提供全方位、深层次的媒体信息情报服务,帮助客户获得极具价值的第一手资讯。
北京新联财通咨询有限公司是同行业中的领军品牌。我们以媒体监测与分析为核心业务,对公众媒体进行追踪分析,借助强大的媒体资源及领先的媒体综合信息服务平台,将信息过滤、提炼、解析,使之成为经济、快捷、高效的竞争情报,为战略决策提供支持。