长沙·岳麓区
职位详情
【岗位职责】
1.构建高效稳定的爬虫架构，结合分布式部署与多线程机制，提升数据采集速度与系统并发能力。
2.基于Scrapy等主流框架，配合Selenium、Dp等自动化工具，实现对网页端及移动端应用的数据提取。
3.面对高强度反爬策略，采用反反爬技术、JS逆向分析、APP逆向解析等方式，保障数据获取的持续性与完整性。
4.熟练运用TCP/IP、HTTP通信协议，结合XPath、BeautifulSoup4、正则表达式等手段，完成抓取内容的结构化解析。
5.承担深度遍历、动态页面渲染、浏览器行为模拟、移动应用数据提取等任务，适配多样化的业务数据需求。
6.与项目组成员紧密协作，及时排查开发过程中的技术难题，推动爬虫项目按时高质量交付。
【任职要求】
1.掌握分布式架构设计与多线程编程原理，具备通过技术手段优化爬虫运行效率的实际能力。
2.深入理解Scrapy框架底层机制，熟练操作Selenium、Dp等自动化工具，能独立完成复杂环境下的数据采集开发。
3.熟悉网络通信协议如TCP/IP、HTTP，精通XPath、BeautifulSoup4、正则表达式等数据提取技术。
4.具备扎实的反爬对抗经验，熟练掌握JS逆向技术，有APP逆向实践经验者更佳。
5.精通深度采集、动态页面抓取、浏览器模拟操作及APP数据提取技术，可应对高难度数据获取场景。
1.构建高效稳定的爬虫架构，结合分布式部署与多线程机制，提升数据采集速度与系统并发能力。
2.基于Scrapy等主流框架，配合Selenium、Dp等自动化工具，实现对网页端及移动端应用的数据提取。
3.面对高强度反爬策略，采用反反爬技术、JS逆向分析、APP逆向解析等方式，保障数据获取的持续性与完整性。
4.熟练运用TCP/IP、HTTP通信协议，结合XPath、BeautifulSoup4、正则表达式等手段，完成抓取内容的结构化解析。
5.承担深度遍历、动态页面渲染、浏览器行为模拟、移动应用数据提取等任务，适配多样化的业务数据需求。
6.与项目组成员紧密协作，及时排查开发过程中的技术难题，推动爬虫项目按时高质量交付。
【任职要求】
1.掌握分布式架构设计与多线程编程原理，具备通过技术手段优化爬虫运行效率的实际能力。
2.深入理解Scrapy框架底层机制，熟练操作Selenium、Dp等自动化工具，能独立完成复杂环境下的数据采集开发。
3.熟悉网络通信协议如TCP/IP、HTTP，精通XPath、BeautifulSoup4、正则表达式等数据提取技术。
4.具备扎实的反爬对抗经验，熟练掌握JS逆向技术，有APP逆向实践经验者更佳。
5.精通深度采集、动态页面抓取、浏览器模拟操作及APP数据提取技术，可应对高难度数据获取场景。
2026-06-24 13:15
IP属地：湖南长沙
职位福利
本科1年以下
湖南尚码教育科技有限公司
未融资 · 100-499人
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
