郑州·金水区
职位详情
岗位职责:
1、精通Python：熟练掌握Python编程语言及其核心特性（如面向对象、多线程/多进程/协程）。
2、爬虫框架与库：熟练使用至少一种主流Python爬虫框架，如Scrapy，熟悉Requests、BeautifulSoup、Selenium、Playwright、Pyppeteer等常用工具库。
3、分析并应对各类网站反爬策略（如IP限制、验证码、User-Agent检测、动态内容加载），通过构建代理池、验证码识别、模拟浏览器操作等方式优化采集方案，提升数据抓取稳定性。
4、数据提取与处理：熟练运用XPath、CSS选择器、正则表达式等技术进行数据解析；具备良好的数据清洗、抽取及结构化处理能力。
5、数据库技能：熟练掌握SQL与NOSQL数据库（如MySQL、MongoDB、Redis），能高效完成数据存储与查询操作。
6、基础环境：熟悉Linux/Unix系统常用命令，掌握Git等版本管理工具的使用。
任职要求：
1、具备5年以上相关工作经验，有大规模分布式爬虫系统的设计与开发实践；
2、掌握Docker、Kubernetes等容器化部署技术；
3、具备JavaScript逆向分析能力；
4、熟悉消息队列机制，如Kafka、RabbitMQ；
5、有大数据技术应用经验者优先，如Hadoop、Spark；
计算机科学、软件工程、信息技术或相关专业背景者优先考虑。
1、精通Python：熟练掌握Python编程语言及其核心特性（如面向对象、多线程/多进程/协程）。
2、爬虫框架与库：熟练使用至少一种主流Python爬虫框架，如Scrapy，熟悉Requests、BeautifulSoup、Selenium、Playwright、Pyppeteer等常用工具库。
3、分析并应对各类网站反爬策略（如IP限制、验证码、User-Agent检测、动态内容加载），通过构建代理池、验证码识别、模拟浏览器操作等方式优化采集方案，提升数据抓取稳定性。
4、数据提取与处理：熟练运用XPath、CSS选择器、正则表达式等技术进行数据解析；具备良好的数据清洗、抽取及结构化处理能力。
5、数据库技能：熟练掌握SQL与NOSQL数据库（如MySQL、MongoDB、Redis），能高效完成数据存储与查询操作。
6、基础环境：熟悉Linux/Unix系统常用命令，掌握Git等版本管理工具的使用。
任职要求：
1、具备5年以上相关工作经验，有大规模分布式爬虫系统的设计与开发实践；
2、掌握Docker、Kubernetes等容器化部署技术；
3、具备JavaScript逆向分析能力；
4、熟悉消息队列机制，如Kafka、RabbitMQ；
5、有大数据技术应用经验者优先，如Hadoop、Spark；
计算机科学、软件工程、信息技术或相关专业背景者优先考虑。
2026-06-22 13:01
IP属地：河南郑州
职位福利
本科5-10年PythonJavaScriptSQL爬虫开发分布式爬虫反爬虫requests
河南九牛电子商务集团有限公司
不需要融资 · 1000-9999人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
