郑州·金水区
职位详情
岗位职责:
1、精通Python：熟练掌握Python编程语言及核心特性（如面向对象、多线程/多进程/协程）。
2、爬虫框架与库：熟练使用至少一种主流Python爬虫框架（如Scrapy），掌握Requests、BeautifulSoup、Selenium、Playwright、Pyppeteer等常用工具。
3、分析并应对各类网站反爬策略（如IP限制、验证码、User-Agent检测、动态内容加载），通过构建代理池、验证码识别、模拟浏览器操作等方式优化采集方案，提升稳定性与效率。
4、数据提取与处理：熟练运用XPath、CSS选择器、正则表达式进行数据抓取；具备良好的数据清洗、抽取和结构化处理能力。
5、数据库技能：熟悉SQL与NOSQL数据库（如MySQL、MongoDB、Redis），能高效完成数据存储与查询操作。
6、基础环境：掌握Linux/Unix系统常用命令；熟悉Git等版本管理工具的使用。
任职要求：
1、具备5年以上相关工作经验，有大规模分布式爬虫系统的设计与开发实践；
2、掌握Docker、Kubernetes等容器化技术；
3、具备JavaScript逆向分析能力；
4、熟悉消息队列技术（如Kafka、RabbitMQ）；
5、有大数据处理相关经验（如Hadoop、Spark）；
计算机科学、软件工程、信息技术或相关专业者优先。
1、精通Python：熟练掌握Python编程语言及核心特性（如面向对象、多线程/多进程/协程）。
2、爬虫框架与库：熟练使用至少一种主流Python爬虫框架（如Scrapy），掌握Requests、BeautifulSoup、Selenium、Playwright、Pyppeteer等常用工具。
3、分析并应对各类网站反爬策略（如IP限制、验证码、User-Agent检测、动态内容加载），通过构建代理池、验证码识别、模拟浏览器操作等方式优化采集方案，提升稳定性与效率。
4、数据提取与处理：熟练运用XPath、CSS选择器、正则表达式进行数据抓取；具备良好的数据清洗、抽取和结构化处理能力。
5、数据库技能：熟悉SQL与NOSQL数据库（如MySQL、MongoDB、Redis），能高效完成数据存储与查询操作。
6、基础环境：掌握Linux/Unix系统常用命令；熟悉Git等版本管理工具的使用。
任职要求：
1、具备5年以上相关工作经验，有大规模分布式爬虫系统的设计与开发实践；
2、掌握Docker、Kubernetes等容器化技术；
3、具备JavaScript逆向分析能力；
4、熟悉消息队列技术（如Kafka、RabbitMQ）；
5、有大数据处理相关经验（如Hadoop、Spark）；
计算机科学、软件工程、信息技术或相关专业者优先。
2026-05-23 14:56
IP属地：河南郑州
职位福利
本科5-10年PythonSQLMYSQLMONGODBRedis
河南九牛电子商务集团有限公司
不需要融资 · 1000-9999人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
