职位详情
Python编程能力:熟练掌握Python语言,深入理解其语法结构及常用库的使用。
爬虫框架:精通主流Python爬虫框架,如Scrapy、Pyspider等,具备Scrapy分布式爬虫系统搭建经验;熟悉Selenium、Requests等工具,可实现用户行为模拟与网页自动化操作。
数据提取技术:熟练运用js、HTML、CSS、正则表达式、XPath等技术进行数据解析,能通过抓包分析接口请求并完成请求模拟。
反爬虫应对:了解各类常见反爬机制,包括IP限制、登录验证、url加密等,具备丰富的实战应对策略与解决方案。
数据处理与存储:熟悉MySQL数据库操作,能使用pandas等工具完成数据清洗、整理与存储,并支持导出为Excel进行后续分析。
网络请求处理:掌握HTTP/HTTPS协议原理,能够高效处理各类网络请求与响应数据。
工作经验
相关项目经验:具备海外社交平台、App、电商平台的数据采集经验,有独立站网页抓取及自动化发布项目经历,拥有外贸企业专职爬虫开发背景者优先考虑。
应对复杂问题的能力:具备解决登录验证、页面动态加载、数据加密等复杂场景的技术能力。
处理动态内容的能力:能够有效解析动态渲染的网页内容,保障数据采集与发布的准确性与稳定性。
爬虫框架:精通主流Python爬虫框架,如Scrapy、Pyspider等,具备Scrapy分布式爬虫系统搭建经验;熟悉Selenium、Requests等工具,可实现用户行为模拟与网页自动化操作。
数据提取技术:熟练运用js、HTML、CSS、正则表达式、XPath等技术进行数据解析,能通过抓包分析接口请求并完成请求模拟。
反爬虫应对:了解各类常见反爬机制,包括IP限制、登录验证、url加密等,具备丰富的实战应对策略与解决方案。
数据处理与存储:熟悉MySQL数据库操作,能使用pandas等工具完成数据清洗、整理与存储,并支持导出为Excel进行后续分析。
网络请求处理:掌握HTTP/HTTPS协议原理,能够高效处理各类网络请求与响应数据。
工作经验
相关项目经验:具备海外社交平台、App、电商平台的数据采集经验,有独立站网页抓取及自动化发布项目经历,拥有外贸企业专职爬虫开发背景者优先考虑。
应对复杂问题的能力:具备解决登录验证、页面动态加载、数据加密等复杂场景的技术能力。
处理动态内容的能力:能够有效解析动态渲染的网页内容,保障数据采集与发布的准确性与稳定性。
2026-08-18 13:22
IP属地:广东深圳
职位福利
大专经验不限ScrapyPandasMySQL运维开发经验Lin

深圳卡思科电子有限公司
不需要融资 · 100-499人


鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
资深Python工程师(AI语言学习方向)
2-4万元/月
Python经验不限本科架构设计经验Linux开发/部署经验分布式经验微服务经验机器学习经验PyTorchTensorFlowMongoDB
深圳 龙华区
资深Python工程师(AI语言学习方向)
2-4万元/月
Python经验不限本科架构设计经验Linux开发/部署经验分布式经验微服务经验机器学习经验PyTorchTensorFlowMongoDB
深圳 龙华区









