职位详情
【职责描述】
1. 开展分布式爬虫系统的开发工作
2. 负责或参与爬虫算法、反爬机制应对策略、代理IP调度优化等相关技术的研究与实际应用,提升数据采集的时效性与成功率
3. 对采集到的数据进行清洗、结构化处理及存储,并持续推进系统平台的性能优化
4. 负责或参与爬虫自动化平台的搭建与迭代升级
【任职要求】
1. 掌握主流爬虫技术架构,具备反爬虫分析与应对能力,有2年以上爬虫相关开发经验
2. 具备大型电商、直播、社交媒体、本地生活类平台数据抓取经验者优先,拥有逆向工程实践经验者更佳
3. 熟练运用Scrapy-Redis、Redis、MongoDB、Mysql、Git等工具
4. 熟悉Linux操作系统下的开发环境,精通Python编程语言
5. 熟悉Selenium、Pyppeteer等浏览器自动化工具
6. 具备JS逆向、安卓端逆向能力,能实现环境补全及RPC HOOK操作
7. 掌握frida、xposed框架下hook插件的开发
8. 具备两年以上行业相关工作经验
1. 开展分布式爬虫系统的开发工作
2. 负责或参与爬虫算法、反爬机制应对策略、代理IP调度优化等相关技术的研究与实际应用,提升数据采集的时效性与成功率
3. 对采集到的数据进行清洗、结构化处理及存储,并持续推进系统平台的性能优化
4. 负责或参与爬虫自动化平台的搭建与迭代升级
【任职要求】
1. 掌握主流爬虫技术架构,具备反爬虫分析与应对能力,有2年以上爬虫相关开发经验
2. 具备大型电商、直播、社交媒体、本地生活类平台数据抓取经验者优先,拥有逆向工程实践经验者更佳
3. 熟练运用Scrapy-Redis、Redis、MongoDB、Mysql、Git等工具
4. 熟悉Linux操作系统下的开发环境,精通Python编程语言
5. 熟悉Selenium、Pyppeteer等浏览器自动化工具
6. 具备JS逆向、安卓端逆向能力,能实现环境补全及RPC HOOK操作
7. 掌握frida、xposed框架下hook插件的开发
8. 具备两年以上行业相关工作经验
2026-06-27 13:09
IP属地:广东广州
职位福利
学历不限经验不限

久远谦长(上海)企业管理咨询有限公司
不需要融资 · 500-999人


鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >










