职位详情
岗位职责:
1、精通Python:熟练掌握Python编程语言及其核心特性(如面向对象、多线程/多进程/协程)。
2、爬虫框架与库:熟练使用至少一种主流Python爬虫框架,例如Scrapy;熟悉Requests、BeautifulSoup、Selenium、Playwright、Pyppeteer等常用工具库。
3、分析并应对网站反爬策略(如IP限制、验证码、User-Agent检测、动态内容加载),通过构建代理池、验证码识别、模拟浏览器操作等方式优化爬虫方案,提升数据采集稳定性。
4、数据提取与处理:熟练运用XPath、CSS选择器、正则表达式等技术进行数据抓取;具备良好的数据清洗、抽取和结构化处理能力。
5、数据库技能:掌握SQL与NoSQL数据库系统(如MySQL、MongoDB、Redis),能高效完成数据存储与查询操作。
6、基础环境:熟悉Linux/Unix系统常用命令操作;掌握Git等版本管理工具使用。
[任职资格]
1、具备5年以上相关工作经验,有实际参与大规模分布式爬虫系统设计与开发经历。
2、了解Docker、Kubernetes等容器化部署技术。
3、具备JavaScript逆向分析能力。
4、掌握常见消息队列机制,如Kafka、RabbitMQ。
5、具有大数据处理背景(如Hadoop、Spark);计算机科学、软件工程、信息技术或相关专业者优先。
薪资福利:
具体面谈
1、精通Python:熟练掌握Python编程语言及其核心特性(如面向对象、多线程/多进程/协程)。
2、爬虫框架与库:熟练使用至少一种主流Python爬虫框架,例如Scrapy;熟悉Requests、BeautifulSoup、Selenium、Playwright、Pyppeteer等常用工具库。
3、分析并应对网站反爬策略(如IP限制、验证码、User-Agent检测、动态内容加载),通过构建代理池、验证码识别、模拟浏览器操作等方式优化爬虫方案,提升数据采集稳定性。
4、数据提取与处理:熟练运用XPath、CSS选择器、正则表达式等技术进行数据抓取;具备良好的数据清洗、抽取和结构化处理能力。
5、数据库技能:掌握SQL与NoSQL数据库系统(如MySQL、MongoDB、Redis),能高效完成数据存储与查询操作。
6、基础环境:熟悉Linux/Unix系统常用命令操作;掌握Git等版本管理工具使用。
[任职资格]
1、具备5年以上相关工作经验,有实际参与大规模分布式爬虫系统设计与开发经历。
2、了解Docker、Kubernetes等容器化部署技术。
3、具备JavaScript逆向分析能力。
4、掌握常见消息队列机制,如Kafka、RabbitMQ。
5、具有大数据处理背景(如Hadoop、Spark);计算机科学、软件工程、信息技术或相关专业者优先。
薪资福利:
具体面谈
2026-07-01 13:49
IP属地:河南郑州
职位福利
本科3-5年数据采集爬虫开发反爬虫

河南九牛电子商务集团有限公司
不需要融资 · 1000-9999人


鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >









