工作职责
1、系统开发：设计和实现高效的爬虫系统，用于自动化地抓取和处理网络数据。
2、数据处理：对抓取的数据进行清洗、去重和结构化处理，以便于后续分析和使用。
3、技术研究：跟踪最新的网络爬虫技术和反爬虫策略，不断提升爬虫系统的智能化和鲁棒性。
4、性能优化：持续优化爬虫系统的性能，包括提高数据抓取效率和降低运行成本。
5、文档编写：编写相关的技术文档，包括爬虫设计说明、用户手册和维护指南。
工作要求
1、精通至少一种编程语言，如Python、Java或C++。
2、熟悉网络爬虫的工作原理和设计模式。
3、熟悉HTML、CSS和JavaScript，能够解析和处理网页内容。
4、熟悉相关JS、APP逆向解码相关技术
5、了解相关反爬虫技术，能够设计和实现高效的反爬虫和反爬虫策略。
6、熟悉多线程和分布式爬虫系统的设计和开发。
润建股份有限公司是通信信息网络与能源网络的管理和运维者，管理和运维业务（以下简称“管维业务”）涵盖通信网络、IDC数据网络、信息网络、能源网络四大基础网络。在“万物互联”时代，公司是通信信息网络与能源网络的智能物业。其中在通信网络管维领域，公司是行业内规模最大的民营企业，是中国移动A级优秀供应商，中国铁塔五星级的服务商。通信网络管维、IDC数据网络管维、信息网络管维、能源网络管维四大业务板块紧跟时代发展趋势，相辅相成，依托公司覆盖全国29个省份，209个地市，1263个县区的服务网络以及日益成熟的创新研发能力，经过近三年的战略布局和研发沉淀，目前公司各项新布局业务快速落地，进入快速发展通道。
润建股份有限公司是通信信息网络与能源网络的管理和运维者，管理和运维业务（以下简称“管维业务”）涵盖通信网 络、IDC数据网络、信息网络、能源网络四大基础网络。在“万物互联”时代，公司是通信信息网络与能源网络的智能物业。 其中在通信网络管维领域，公司是行业内规模最大的民营企业，是中国移动A级优秀供应商，中国铁塔五星级的服务商。通 信网络管维、IDC数据网络管维、信息网络管维、能源网络管维四大业务板块紧跟时**展趋势，相辅相成，依托公司覆盖 全国29个省份，209个地市，1263个县区的服务网络以及日益成熟的创新研发能力，经过近三年的战略布局和研发沉淀，目 前公司各项新布局业务快速落地，进入快速发展通道。
公司管维业务包括网络的设计、建设、维护、优化、数据处理、增值服务等，涉及通信网络、IDC数据网络、信息网络、 能源网络。
1、通信网络管维：通信网络由核心网、传输网、无线及有线接入网等以及通信4G、5G基站等配套设施组成，公司通信网络管维业务包括 通信网络运维、通信网络产品集成、通信节能解决方案等。
2、IDC数据网络管维：IDC数据网络由数据、传输设备、存储设备、数据处理和保护设备等组成，包括了弱电智能化系统、消防系统、暖通空 调系统、电气系统等多个模块，涵盖了楼宇、基础设施、IT硬件、IT软件应用、业务等部分。公司IDC数据网络管维业务包 括数据中心的咨询设计、建设、运维、运营等，以及云咨询、云集成、云管理、云运维等IDC增值服务；
3、信息网络管维：随着数字化深入发展，万物互联组成一个无所不在的信息网络，信息网络由智能交互传感器硬件、通信传输网络、能源 支撑网络、智能中枢、数字应用等组成。 公司信息网络管维业务包括智能交互硬件管维（传感器等传输和交互设备的检测、维修、调试），智能中枢管维（大数 据治理、机器学习、线上+线下联动管维），数字应用管维（数字化赋能行业解决方案定制化实施，属地化7×24小时服务） 等。目前公司已在电网数字化、智慧校园、社会综合治理等典型应用领域深入拓展。
4、能源网络管维：能源网络包括了发电、输电、变电、配电、用电等环节。公司能源网络管维业务重点在发电和用电侧，主要包括了光伏、 风能等新能源发电的咨询设计、建设、运营、维护等，以及用户网络的咨询设计、建设、运营、维护和智慧电能解决方案等。