职位详情
python爬虫讲师
【岗位职责】
1. 构建高效稳定的爬虫架构,结合分布式部署与多线程机制,提升数据采集速度与系统吞吐能力。
2. 基于Scrapy等主流框架及Selenium、Dp等自动化工具,完成网页端与移动端的数据采集任务。
3. 面对复杂反爬策略,熟练运用爬虫对抗技术、JS逆向分析、APP逆向解析等方法,保障数据获取的持续性。
4. 利用 TCP/IP、HTTP 协议知识,结合 XPath、BeautifulSoup4、正则表达式等手段,实现对抓取内容的精准提取与清洗。
5. 承担深度采集、动态页面捕获、浏览器行为模拟、APP 数据提取等工作,适配多样化业务场景下的数据需求。
6. 与项目组成员保持紧密协作,及时定位并解决开发过程中的技术难题,确保任务按时高质量交付。
【任职要求】
1. 具备分布式架构与多线程编程经验,能通过技术手段有效优化爬虫系统的运行效率。
2. 深入理解 Scrapy 框架底层机制,熟练操作 Selenium、Dp 等自动化工具,具备扎实的数据抓取实战能力。
3. 掌握 TCP/IP、HTTP 通信协议,熟悉 XPath、BeautifulSoup4 及正则表达式的应用,可高效完成数据解析工作。
4. 精通各类爬虫与反爬应对策略,熟练掌握 JS 逆向技术,有 APP 逆向经验者更佳。
5. 能够胜任深度抓取、动态页面采集、浏览器模拟及 APP 数据提取等高难度任务,具备应对复杂环境的技术实力。
【岗位职责】
1. 构建高效稳定的爬虫架构,结合分布式部署与多线程机制,提升数据采集速度与系统吞吐能力。
2. 基于Scrapy等主流框架及Selenium、Dp等自动化工具,完成网页端与移动端的数据采集任务。
3. 面对复杂反爬策略,熟练运用爬虫对抗技术、JS逆向分析、APP逆向解析等方法,保障数据获取的持续性。
4. 利用 TCP/IP、HTTP 协议知识,结合 XPath、BeautifulSoup4、正则表达式等手段,实现对抓取内容的精准提取与清洗。
5. 承担深度采集、动态页面捕获、浏览器行为模拟、APP 数据提取等工作,适配多样化业务场景下的数据需求。
6. 与项目组成员保持紧密协作,及时定位并解决开发过程中的技术难题,确保任务按时高质量交付。
【任职要求】
1. 具备分布式架构与多线程编程经验,能通过技术手段有效优化爬虫系统的运行效率。
2. 深入理解 Scrapy 框架底层机制,熟练操作 Selenium、Dp 等自动化工具,具备扎实的数据抓取实战能力。
3. 掌握 TCP/IP、HTTP 通信协议,熟悉 XPath、BeautifulSoup4 及正则表达式的应用,可高效完成数据解析工作。
4. 精通各类爬虫与反爬应对策略,熟练掌握 JS 逆向技术,有 APP 逆向经验者更佳。
5. 能够胜任深度抓取、动态页面采集、浏览器模拟及 APP 数据提取等高难度任务,具备应对复杂环境的技术实力。
2026-06-24 13:53
IP属地:湖南长沙
职位福利
本科1-3年团队管理经验爬虫经验SeleniumSparkPython

湖南尚码教育科技有限公司
未融资 · 100-499人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >








