成都·武侯区
职位详情
工作职责：
1. 负责Web页面及接口数据的采集任务，涵盖动态页面、API接口与小程序端的数据提取，保障数据获取的精确性与时效性。
2. 搭建并维护小程序接口采集系统，持续优化采集流程，提高数据抓取效率与质量。
3. 开发与迭代现有爬虫架构，覆盖任务调度、数据抓取、系统维护、结果校验等全流程工作。
4. 深入研究各类网站的防护机制与反爬策略，总结核心技术应对方案。
5. 具备处理协议层反爬、风控拦截、人机验证等复杂场景的能力。
6. 主导爬虫技术难题的攻关与解决方案落地。
7. 编写完整的技术文档，确保系统代码具备良好的可读性与可维护性。
任职要求：
1. 熟悉Python语言与计算机网络原理，熟练使用多线程编程，掌握主流爬虫框架，具备小程序数据抓取实战经验；
2. 精通JavaScript逆向分析技术，包括虚拟机机制、代码混淆、抽象语法树（AST）等，能独立完成小程序包的反编译、解析及接口逆向工作；
3. 掌握常见反爬应对方法，如验证码识别、IP代理池管理、headers与cookie认证处理等；
4. 能够分析网络通信链路，解决TLS/HTTP2协议流量解析、IP指纹识别等问题；
5. 了解基础机器学习算法，可用于简单图像验证码识别与人机对抗场景的处理；
6. 熟练使用Redis、MySQL、git等常用中间件与开发工具；
1. 负责Web页面及接口数据的采集任务，涵盖动态页面、API接口与小程序端的数据提取，保障数据获取的精确性与时效性。
2. 搭建并维护小程序接口采集系统，持续优化采集流程，提高数据抓取效率与质量。
3. 开发与迭代现有爬虫架构，覆盖任务调度、数据抓取、系统维护、结果校验等全流程工作。
4. 深入研究各类网站的防护机制与反爬策略，总结核心技术应对方案。
5. 具备处理协议层反爬、风控拦截、人机验证等复杂场景的能力。
6. 主导爬虫技术难题的攻关与解决方案落地。
7. 编写完整的技术文档，确保系统代码具备良好的可读性与可维护性。
任职要求：
1. 熟悉Python语言与计算机网络原理，熟练使用多线程编程，掌握主流爬虫框架，具备小程序数据抓取实战经验；
2. 精通JavaScript逆向分析技术，包括虚拟机机制、代码混淆、抽象语法树（AST）等，能独立完成小程序包的反编译、解析及接口逆向工作；
3. 掌握常见反爬应对方法，如验证码识别、IP代理池管理、headers与cookie认证处理等；
4. 能够分析网络通信链路，解决TLS/HTTP2协议流量解析、IP指纹识别等问题；
5. 了解基础机器学习算法，可用于简单图像验证码识别与人机对抗场景的处理；
6. 熟练使用Redis、MySQL、git等常用中间件与开发工具；
2026-05-13 13:54
IP属地：四川成都
职位福利
大专3-5年Python反爬虫爬虫开发数据采集
四川柒零卡科技有限公司
未融资 · 20-99人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
