职位详情
【岗位职责】
1. 构建高效爬虫架构,结合分布式部署与多线程机制,提升数据采集速度与系统稳定性。
2. 借助 Scrapy 框架及 Selenium、Dp 等自动化工具,完成网页端与移动端的数据抓取任务。
3. 应对各类反爬策略,通过爬虫对抗技术、JS 逆向分析、APP 逆向解析等方式保障数据持续获取。
4. 利用 TCP/IP、HTTP 协议基础,结合 XPath、BeautifulSoup4、正则表达式等手段,实现抓取内容的精准提取与清洗。
5. 承担深度遍历、动态页面渲染、浏览器行为模拟、移动应用数据提取等工作,适配多样化业务场景需求。
6. 与项目组成员保持协作,及时排查并解决开发过程中的技术难题,保障项目按时交付。
【任职要求】
1. 掌握分布式架构设计与多线程编程技巧,具备爬虫系统性能调优实践经验。
2. 深入理解 Scrapy 框架底层机制,熟练使用 Selenium、Dp 等自动化工具进行数据采集开发。
3. 熟悉网络通信协议如 TCP/IP、HTTP,能运用 XPath、BeautifulSoup4 及正则表达式完成数据解析。
4. 精通主流爬虫与反爬应对方案,具备 JS 逆向能力,有 APP 逆向经验者更佳。
5. 熟练掌握深度采集、动态页面抓取、浏览器模拟操作及 APP 数据提取技术,可处理复杂采集环境。
薪资6000-10000
1. 构建高效爬虫架构,结合分布式部署与多线程机制,提升数据采集速度与系统稳定性。
2. 借助 Scrapy 框架及 Selenium、Dp 等自动化工具,完成网页端与移动端的数据抓取任务。
3. 应对各类反爬策略,通过爬虫对抗技术、JS 逆向分析、APP 逆向解析等方式保障数据持续获取。
4. 利用 TCP/IP、HTTP 协议基础,结合 XPath、BeautifulSoup4、正则表达式等手段,实现抓取内容的精准提取与清洗。
5. 承担深度遍历、动态页面渲染、浏览器行为模拟、移动应用数据提取等工作,适配多样化业务场景需求。
6. 与项目组成员保持协作,及时排查并解决开发过程中的技术难题,保障项目按时交付。
【任职要求】
1. 掌握分布式架构设计与多线程编程技巧,具备爬虫系统性能调优实践经验。
2. 深入理解 Scrapy 框架底层机制,熟练使用 Selenium、Dp 等自动化工具进行数据采集开发。
3. 熟悉网络通信协议如 TCP/IP、HTTP,能运用 XPath、BeautifulSoup4 及正则表达式完成数据解析。
4. 精通主流爬虫与反爬应对方案,具备 JS 逆向能力,有 APP 逆向经验者更佳。
5. 熟练掌握深度采集、动态页面抓取、浏览器模拟操作及 APP 数据提取技术,可处理复杂采集环境。
薪资6000-10000
2026-06-24 14:25
IP属地:湖南长沙
职位福利
本科1年以下JS 逆向

湖南尚码教育科技有限公司
未融资 · 100-499人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >







