职位详情
1、独立负责复杂爬虫项目的技术调研、架构设计、开发实施与持续优化,主导攻克高难度的反爬与风控策略(包括但不限于高强度JS加密、验证码识别、App逆向、账号登录等)
2、深入分析目标网站的防护机制,设计逆向方案及对抗策略,保障数据抓取的稳定性与效率。
3、构建和维护高可用、可扩展的分布式爬虫系统,提升系统的并发处理、调度及去重能力。
4、建立和完善监控、预警及自动化运维体系,实现对爬虫运行状态、数据质量及异常行为的实时感知与快速响应。
5、跟踪爬虫与反爬领域前沿技术,引入新工具、新方法,持续提升团队的技术对抗与工程实施能力。
任职要求:
1、专科及以上学历,计算机相关专业,2年以上爬虫开发经验,具备复杂场景爬虫架构设计与逆向破解专项能力。
2、精通JavaScript逆向与分析,能够处理WebAssembly、OB混淆、环境检测等高级防护;熟悉安卓/iOS应用逆向,具有脱壳、调试、算法还原等实战经验。
3、熟练掌握Scrapy、Selenium、Playwright等主流爬虫框架及自动化工具,对分布式、异步并发、缓存及去重有深度实践。
4、具备扎实的工程化经验,熟悉DevOps流程设计、容器化部署及爬虫运维体系搭建,代码规范性强。
5、有电商、社区等行业爬虫经验者优先,有成功带领小型技术团队或复杂项目管理经验者优先。
6、具备优秀的技术判断力和系统性解决问题的能力,强烈的责任心和自驱力,能承担技术攻坚与团队协作者角色。
7、有海外GitHub/YouTube/TikTok爬虫项目经验优先考虑。
2、深入分析目标网站的防护机制,设计逆向方案及对抗策略,保障数据抓取的稳定性与效率。
3、构建和维护高可用、可扩展的分布式爬虫系统,提升系统的并发处理、调度及去重能力。
4、建立和完善监控、预警及自动化运维体系,实现对爬虫运行状态、数据质量及异常行为的实时感知与快速响应。
5、跟踪爬虫与反爬领域前沿技术,引入新工具、新方法,持续提升团队的技术对抗与工程实施能力。
任职要求:
1、专科及以上学历,计算机相关专业,2年以上爬虫开发经验,具备复杂场景爬虫架构设计与逆向破解专项能力。
2、精通JavaScript逆向与分析,能够处理WebAssembly、OB混淆、环境检测等高级防护;熟悉安卓/iOS应用逆向,具有脱壳、调试、算法还原等实战经验。
3、熟练掌握Scrapy、Selenium、Playwright等主流爬虫框架及自动化工具,对分布式、异步并发、缓存及去重有深度实践。
4、具备扎实的工程化经验,熟悉DevOps流程设计、容器化部署及爬虫运维体系搭建,代码规范性强。
5、有电商、社区等行业爬虫经验者优先,有成功带领小型技术团队或复杂项目管理经验者优先。
6、具备优秀的技术判断力和系统性解决问题的能力,强烈的责任心和自驱力,能承担技术攻坚与团队协作者角色。
7、有海外GitHub/YouTube/TikTok爬虫项目经验优先考虑。
2026-02-21 14:30
IP属地:广东
职位福利
本科及以上1-3年

深圳市文德数慧科技开发有限责任公司
A轮 · 4人以上

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >










