职位详情
【职责描述】
1. 开展分布式爬虫系统的开发与维护
2. 参与或主导爬虫算法、反爬机制应对策略及代理IP优化方案的研究与实施,提升数据采集的时效性与成功率
3. 对获取的数据进行清洗、结构化处理与存储,并持续推进平台性能优化
4. 参与或负责爬虫自动化平台的搭建及迭代升级
【任职要求】
1. 掌握主流爬虫技术架构,具备反爬虫分析与应对能力,累计2年以上相关工作经验
2. 具备大型电商平台、直播平台、社交媒体或本地生活类平台数据抓取经验者优先,有逆向破解实战经历者更佳
3. 精通Scrapy-Redis、Redis、MongoDB、Mysql、Git等工具的使用
4. 熟悉Linux操作系统下的开发环境,熟练运用Python进行项目开发
5. 熟练操作Selenium、Pyppeteer等浏览器自动化工具
6. 具备JS逆向与安卓逆向能力,可实现补环境及RPC HOOK技术应用
7. 能独立编写frida、xposed hook插件
8. 具备两年以上实际工作经历
1. 开展分布式爬虫系统的开发与维护
2. 参与或主导爬虫算法、反爬机制应对策略及代理IP优化方案的研究与实施,提升数据采集的时效性与成功率
3. 对获取的数据进行清洗、结构化处理与存储,并持续推进平台性能优化
4. 参与或负责爬虫自动化平台的搭建及迭代升级
【任职要求】
1. 掌握主流爬虫技术架构,具备反爬虫分析与应对能力,累计2年以上相关工作经验
2. 具备大型电商平台、直播平台、社交媒体或本地生活类平台数据抓取经验者优先,有逆向破解实战经历者更佳
3. 精通Scrapy-Redis、Redis、MongoDB、Mysql、Git等工具的使用
4. 熟悉Linux操作系统下的开发环境,熟练运用Python进行项目开发
5. 熟练操作Selenium、Pyppeteer等浏览器自动化工具
6. 具备JS逆向与安卓逆向能力,可实现补环境及RPC HOOK技术应用
7. 能独立编写frida、xposed hook插件
8. 具备两年以上实际工作经历
2026-06-22 13:19
IP属地:浙江杭州
职位福利
学历不限经验不限

久远谦长(上海)企业管理咨询有限公司
不需要融资 · 500-999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >











