职位详情
【岗位职责】
1.构建高效爬虫架构,结合分布式部署与多线程机制,提升数据采集效率。
2.借助Scrapy框架及Selenium、Dp等自动化工具,完成网页端与移动端的数据抓取任务。
3.应对各类反爬策略,通过爬虫对抗技术、JS逆向分析、APP逆向解析等方式保障数据稳定获取。
4.利用TCP/IP、HTTP协议基础,结合XPath、BeautifulSoup4、正则表达式等手段,实现抓取数据的精准提取与处理。
5.承担深度采集、动态页面解析、浏览器行为模拟、APP数据提取等工作,适配多样业务场景需求。
6.与团队保持高效协作,及时定位并解决开发过程中的技术问题,保障项目按时推进。
【任职要求】
1.掌握分布式架构与多线程编程原理,具备利用相关技术优化爬虫性能的能力。
2.深入理解Scrapy框架底层机制,熟练使用Selenium、Dp等自动化工具进行数据采集开发。
3.熟悉TCP/IP、HTTP通信协议,精通XPath、BeautifulSoup4及正则表达式,用于结构化解析数据内容。
4.精通主流爬虫与反爬应对方案,掌握JS逆向分析技巧,有APP逆向经验者更佳。
5.具备深度抓取、动态页面采集、浏览器模拟操作、APP数据提取等实战能力,可应对复杂采集环境。
1.构建高效爬虫架构,结合分布式部署与多线程机制,提升数据采集效率。
2.借助Scrapy框架及Selenium、Dp等自动化工具,完成网页端与移动端的数据抓取任务。
3.应对各类反爬策略,通过爬虫对抗技术、JS逆向分析、APP逆向解析等方式保障数据稳定获取。
4.利用TCP/IP、HTTP协议基础,结合XPath、BeautifulSoup4、正则表达式等手段,实现抓取数据的精准提取与处理。
5.承担深度采集、动态页面解析、浏览器行为模拟、APP数据提取等工作,适配多样业务场景需求。
6.与团队保持高效协作,及时定位并解决开发过程中的技术问题,保障项目按时推进。
【任职要求】
1.掌握分布式架构与多线程编程原理,具备利用相关技术优化爬虫性能的能力。
2.深入理解Scrapy框架底层机制,熟练使用Selenium、Dp等自动化工具进行数据采集开发。
3.熟悉TCP/IP、HTTP通信协议,精通XPath、BeautifulSoup4及正则表达式,用于结构化解析数据内容。
4.精通主流爬虫与反爬应对方案,掌握JS逆向分析技巧,有APP逆向经验者更佳。
5.具备深度抓取、动态页面采集、浏览器模拟操作、APP数据提取等实战能力,可应对复杂采集环境。
2026-06-24 14:43
IP属地:湖南长沙
职位福利
本科1年以下

湖南尚码教育科技有限公司
未融资 · 100-499人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >







