广州·黄埔区
职位详情
职位描述：
- 根据业务需求，承担分布式网络爬虫系统的设计与开发工作，并完成数据的清洗与提取；
- 制定爬虫调度策略及反屏蔽机制，优化页面抓取效率与数据准确性；
- 独立应对并解决开发过程中出现的各种技术难题；
任职资格：
- 计算机相关专业背景，本科及以上学历，具备2年以上爬虫领域开发经验；
- 精通Python语言，掌握计算机网络原理，熟练运用多线程技术，熟悉Scrapy等主流爬虫框架；
- 熟练操作Linux系统，掌握正则表达式，熟悉Mysql、MongoDB、Redis等常用数据库与缓存技术；
- 具备处理账号封禁、IP封锁、验证码识别、图像解析等常见反爬问题的能力；
- 具备良好的沟通能力与团队协作精神；
- 需拥有群控系统的实际项目经验；
加分项
- 掌握docker容器化技术者优先；
- 具备php/nodejs/go等其他语言的实际开发经历者优先；
- 根据业务需求，承担分布式网络爬虫系统的设计与开发工作，并完成数据的清洗与提取；
- 制定爬虫调度策略及反屏蔽机制，优化页面抓取效率与数据准确性；
- 独立应对并解决开发过程中出现的各种技术难题；
任职资格：
- 计算机相关专业背景，本科及以上学历，具备2年以上爬虫领域开发经验；
- 精通Python语言，掌握计算机网络原理，熟练运用多线程技术，熟悉Scrapy等主流爬虫框架；
- 熟练操作Linux系统，掌握正则表达式，熟悉Mysql、MongoDB、Redis等常用数据库与缓存技术；
- 具备处理账号封禁、IP封锁、验证码识别、图像解析等常见反爬问题的能力；
- 具备良好的沟通能力与团队协作精神；
- 需拥有群控系统的实际项目经验；
加分项
- 掌握docker容器化技术者优先；
- 具备php/nodejs/go等其他语言的实际开发经历者优先；
2025-12-11 07:57
IP属地：广东广州
职位福利
本科3-5年Python
广州魔方文化集团有限公司
20-99人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
8千-1.3万/月
爬虫工程师1-3年本科互联网平台网约车出行平台
广州 白云区
收藏职位
