广州·番禺区
职位详情
岗位职责：
爬虫系统开发：构建分布式爬取架构，实现对千万级数据的高效采集，应对反爬机制（如验证码/IP封锁/接口加密），持续优化采集速度，增强爬虫系统的性能与可靠性。
数据处理流程：规划数据清洗、去重及存储策略，建立自动化采集与监控体系，确保数据准确性与采集时效性。
系统监控维护：实时跟踪爬虫运行情况，及时发现并处理采集故障，保障系统长时间稳定运转。
反爬策略研究：深入分析目标站点防护逻辑，制定合规可行的应对方案，保证数据获取行为合法合规。
任职要求：
1. 精通python编程，掌握scrapy、requests等主流爬虫框架。
2. 熟练运用js，具备扎实的js逆向能力。
3. 拥有大量数据抓取实践经历，熟悉客户端逆向开发，熟练操作常见抓包、反编译、hook工具。
4. 能够有效应对各类验证码难题，如字符型、滑块式等类型。
5. 具备良好的协作精神，工作积极主动，富有技术热情。
基本要求：
大专及以上学历，计算机相关专业背景，具备爬虫开发经历者优先考虑。
具有较强的团队配合意识和技术钻研动力。
爬虫系统开发：构建分布式爬取架构，实现对千万级数据的高效采集，应对反爬机制（如验证码/IP封锁/接口加密），持续优化采集速度，增强爬虫系统的性能与可靠性。
数据处理流程：规划数据清洗、去重及存储策略，建立自动化采集与监控体系，确保数据准确性与采集时效性。
系统监控维护：实时跟踪爬虫运行情况，及时发现并处理采集故障，保障系统长时间稳定运转。
反爬策略研究：深入分析目标站点防护逻辑，制定合规可行的应对方案，保证数据获取行为合法合规。
任职要求：
1. 精通python编程，掌握scrapy、requests等主流爬虫框架。
2. 熟练运用js，具备扎实的js逆向能力。
3. 拥有大量数据抓取实践经历，熟悉客户端逆向开发，熟练操作常见抓包、反编译、hook工具。
4. 能够有效应对各类验证码难题，如字符型、滑块式等类型。
5. 具备良好的协作精神，工作积极主动，富有技术热情。
基本要求：
大专及以上学历，计算机相关专业背景，具备爬虫开发经历者优先考虑。
具有较强的团队配合意识和技术钻研动力。
2026-06-26 13:45
IP属地：广东广州
职位福利
大专1-3年
广州加创商贸有限公司
0-20人
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
