职位详情
岗位职责:
1. 负责PC端、手机App等平台的数据信息抓取与采集;
2. 根据指定数据源开展数据采集工作,并按标准对采集结果进行清洗及结构化整理;
任职要求:
1. 具备数据爬取相关经验,了解海外网站的数据结构与访问特点;
2. 精通Python编程语言,熟练运用Scrapy等主流框架,拥有丰富的应对反爬机制的实战经验;
掌握境外站点数据获取技术,熟悉VPN配置、境外服务器部署、IP资源管理与代理策略,以及API调用、验证码处理等相关技能;
3. 能够熟练操作各类抓包工具,具备App脱壳、逆向分析和抓包能力,可独立完成项目搭建与实施;
4. 掌握Scrapy等常用Python开发框架,具备扎实的数据采集与清洗处理能力;
5. 熟悉MySQL、MongoDB、Redis、ES等常见数据库的使用;
6. 熟练应用正则表达式、XPath等数据解析方法;
7. 了解数据采集与处理领域的相关法律法规,能够依法依规开展数据采集与处理工作;
1. 负责PC端、手机App等平台的数据信息抓取与采集;
2. 根据指定数据源开展数据采集工作,并按标准对采集结果进行清洗及结构化整理;
任职要求:
1. 具备数据爬取相关经验,了解海外网站的数据结构与访问特点;
2. 精通Python编程语言,熟练运用Scrapy等主流框架,拥有丰富的应对反爬机制的实战经验;
掌握境外站点数据获取技术,熟悉VPN配置、境外服务器部署、IP资源管理与代理策略,以及API调用、验证码处理等相关技能;
3. 能够熟练操作各类抓包工具,具备App脱壳、逆向分析和抓包能力,可独立完成项目搭建与实施;
4. 掌握Scrapy等常用Python开发框架,具备扎实的数据采集与清洗处理能力;
5. 熟悉MySQL、MongoDB、Redis、ES等常见数据库的使用;
6. 熟练应用正则表达式、XPath等数据解析方法;
7. 了解数据采集与处理领域的相关法律法规,能够依法依规开展数据采集与处理工作;
2026-10-05 14:46
IP属地:山东济南
职位福利
大专1-3年爬虫大数据采集pythonScrapy境外站点抓取app脱壳逆向抓包

山东智沐数字科技有限公司
不需要融资 · 100-499人


鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
1-1.2万/月
爬虫工程师5-10年本科爬虫开发反爬虫PythonJavaScrapyBeautifulSoupHTMLCSSJavaScript
青岛 崂山区
聊城东阿县招工地小工/杂工
100-200元/天
小工1-2个月3-5人月结
聊城 东阿县2026年10月09日 14:51

先生
刚刚活跃德州庆云县招强电有电工证高处作业证
50-60元/时
强电工长期包住包吃3-5人月结点工电工证高空作业证
德州 庆云县2026年10月09日 14:51

先生
今日活跃






