武汉·洪山区
职位详情
1.爬虫相关要求必须满足：
（1）使用代理IP池解决IP限制问题；
（2）处理动态渲染数据(模拟用户点击，接口分析，js调用等)，动态效率优化；
（3）同步爬取 vs 异步爬取；
（4）控制爬虫频率和重试；
（5)了解Scrapy框架，能自主封装基于多线程，商品链接收集到商品详情采集的代码；
(6)其中Scrapy框架必须十分熟悉，且必须对cloudflare（五秒盾）反爬虫的解决思路十分熟悉；
（7）推荐反爬网站。必须能解决：https://www.buffalo-boots.com/en-int/ 五秒盾反爬；
（8）必须会pandas等工具对csv文件数据进行清洗和整理。
2.次要要求，对js和css有一定的了解；
（1）熟悉css样式布局，以及了结简单js代码的编写。
3.次要要求，有shopyy装扮和相关行业从事的经验。
（1）使用代理IP池解决IP限制问题；
（2）处理动态渲染数据(模拟用户点击，接口分析，js调用等)，动态效率优化；
（3）同步爬取 vs 异步爬取；
（4）控制爬虫频率和重试；
（5)了解Scrapy框架，能自主封装基于多线程，商品链接收集到商品详情采集的代码；
(6)其中Scrapy框架必须十分熟悉，且必须对cloudflare（五秒盾）反爬虫的解决思路十分熟悉；
（7）推荐反爬网站。必须能解决：https://www.buffalo-boots.com/en-int/ 五秒盾反爬；
（8）必须会pandas等工具对csv文件数据进行清洗和整理。
2.次要要求，对js和css有一定的了解；
（1）熟悉css样式布局，以及了结简单js代码的编写。
3.次要要求，有shopyy装扮和相关行业从事的经验。
2026-05-15 12:53
IP属地：湖北
职位福利
大专1-3年计算机相关专业爬虫开发经验数据处理经验反爬策略和实践经验PythonScrapyNutch爬虫工程师
武汉北固南峰电子商务有限公司
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
数据采集员15人
4000-8000元/月
数据采集经验不限大专计算机相关专业数据处理经验地理信息/测绘工程相关专业地图数据采集经验适应外出作业/出差
武汉 武昌区 杨园
方先生 · 武汉绘元科技有限公司5日内活跃
收藏职位
