广州·黄埔区
职位详情
职位描述
- 根据业务需求，负责构建与维护分布式网络爬虫架构，并完成数据的清洗与抽取；
- 制定爬取策略及反屏蔽机制，优化页面抓取的速度与准确性；
- 具备独立分析并处理开发中各类技术难题的能力；
任职资格
- 计算机相关专业，本科及以上学历，具备2年以上爬虫系统开发经验；
- 精通Python语言，掌握计算机网络原理，熟练运用多线程编程，了解Scrapy等主流爬虫框架；
- 熟悉Linux系统操作，掌握正则表达式，熟悉Mysql、MongoDB、Redis等常用数据库与缓存技术；
- 能有效应对账号封禁、IP封锁、验证码破解、图像识别等常见挑战；
- 具备良好的沟通能力与团队协作精神
加分项
- 掌握docker容器化技术者优先；
- 有php/nodejs/go等其他语言实际项目经验者优先；
- 根据业务需求，负责构建与维护分布式网络爬虫架构，并完成数据的清洗与抽取；
- 制定爬取策略及反屏蔽机制，优化页面抓取的速度与准确性；
- 具备独立分析并处理开发中各类技术难题的能力；
任职资格
- 计算机相关专业，本科及以上学历，具备2年以上爬虫系统开发经验；
- 精通Python语言，掌握计算机网络原理，熟练运用多线程编程，了解Scrapy等主流爬虫框架；
- 熟悉Linux系统操作，掌握正则表达式，熟悉Mysql、MongoDB、Redis等常用数据库与缓存技术；
- 能有效应对账号封禁、IP封锁、验证码破解、图像识别等常见挑战；
- 具备良好的沟通能力与团队协作精神
加分项
- 掌握docker容器化技术者优先；
- 有php/nodejs/go等其他语言实际项目经验者优先；
2025-12-11 07:57
IP属地：广东广州
职位福利
本科1-3年Python
广州魔方文化集团有限公司
20-99人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
8千-1.3万/月
爬虫工程师1-3年本科互联网平台网约车出行平台
广州 白云区
收藏职位
