武汉·洪山区
职位详情
1. 爬虫技术能力需全面具备：
（1）需配置代理IP池以应对IP访问限制；
（2）能够处理页面动态渲染内容，包括模拟用户操作、接口抓包分析及JS函数调用等，并实现动态采集效率优化；
（3）掌握同步与异步爬取机制，合理选择采集方式；
（4）具备控制请求频率与失败重试策略的能力；
（5）熟悉Scrapy框架，可独立封装从商品链接获取到详情页数据抓取的多线程采集程序；
（6）须精通Scrapy框架，且对Cloudflare五秒盾反爬机制有深入理解并能提出有效解决方案；
（7）需有能力攻克指定反爬站点，例如：https://www.buffalo-boots.com/en-int/ 的五秒盾防护；
（8）熟练使用pandas等工具完成CSV数据的清洗、去重与结构化整理。
2. 附加技能要求，需具备一定的JS与CSS基础：
（1）了解CSS布局原理，能阅读和编写基础JavaScript代码。
3. 辅助加分项，拥有Shopyy店铺搭建经验或相关行业背景者优先。
（1）需配置代理IP池以应对IP访问限制；
（2）能够处理页面动态渲染内容，包括模拟用户操作、接口抓包分析及JS函数调用等，并实现动态采集效率优化；
（3）掌握同步与异步爬取机制，合理选择采集方式；
（4）具备控制请求频率与失败重试策略的能力；
（5）熟悉Scrapy框架，可独立封装从商品链接获取到详情页数据抓取的多线程采集程序；
（6）须精通Scrapy框架，且对Cloudflare五秒盾反爬机制有深入理解并能提出有效解决方案；
（7）需有能力攻克指定反爬站点，例如：https://www.buffalo-boots.com/en-int/ 的五秒盾防护；
（8）熟练使用pandas等工具完成CSV数据的清洗、去重与结构化整理。
2. 附加技能要求，需具备一定的JS与CSS基础：
（1）了解CSS布局原理，能阅读和编写基础JavaScript代码。
3. 辅助加分项，拥有Shopyy店铺搭建经验或相关行业背景者优先。
2026-07-06 13:56
IP属地：湖北武汉
职位福利
大专经验不限数据爬虫反爬虫Python
武汉北固南峰电子商务有限公司
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
Python/电商数据采集专员
1.1-2.5万元/月
数据采集1-3年大专计算机相关专业爬虫开发经验数据处理经验反爬策略和实践经验PythonScrapyNutch爬虫工程师
武汉 洪山区
收藏职位
