深圳·龙华区
职位详情
Python编程能力：熟练掌握Python语言，深入理解其语法结构及常用库的使用。
爬虫框架：精通主流Python爬虫框架，如Scrapy、Pyspider等，具备Scrapy分布式爬虫系统搭建经验；熟悉Selenium、Requests等工具，可实现用户行为模拟与网页自动化操作。
数据提取技术：熟练运用js、HTML、CSS、正则表达式、XPath等技术进行数据解析，能通过抓包分析接口请求并完成请求模拟。
反爬虫应对：了解各类常见反爬机制，包括IP限制、登录验证、url加密等，具备丰富的实战应对策略与解决方案。
数据处理与存储：熟悉MySQL数据库操作，能使用pandas等工具完成数据清洗、整理与存储，并支持导出为Excel进行后续分析。
网络请求处理：掌握HTTP/HTTPS协议原理，能够高效处理各类网络请求与响应数据。
工作经验
相关项目经验：具备海外社交平台、App、电商平台的数据采集经验，有独立站网页抓取及自动化发布项目经历，拥有外贸企业专职爬虫开发背景者优先考虑。
应对复杂问题的能力：具备解决登录验证、页面动态加载、数据加密等复杂场景的技术能力。
处理动态内容的能力：能够有效解析动态渲染的网页内容，保障数据采集与发布的准确性与稳定性。
爬虫框架：精通主流Python爬虫框架，如Scrapy、Pyspider等，具备Scrapy分布式爬虫系统搭建经验；熟悉Selenium、Requests等工具，可实现用户行为模拟与网页自动化操作。
数据提取技术：熟练运用js、HTML、CSS、正则表达式、XPath等技术进行数据解析，能通过抓包分析接口请求并完成请求模拟。
反爬虫应对：了解各类常见反爬机制，包括IP限制、登录验证、url加密等，具备丰富的实战应对策略与解决方案。
数据处理与存储：熟悉MySQL数据库操作，能使用pandas等工具完成数据清洗、整理与存储，并支持导出为Excel进行后续分析。
网络请求处理：掌握HTTP/HTTPS协议原理，能够高效处理各类网络请求与响应数据。
工作经验
相关项目经验：具备海外社交平台、App、电商平台的数据采集经验，有独立站网页抓取及自动化发布项目经历，拥有外贸企业专职爬虫开发背景者优先考虑。
应对复杂问题的能力：具备解决登录验证、页面动态加载、数据加密等复杂场景的技术能力。
处理动态内容的能力：能够有效解析动态渲染的网页内容，保障数据采集与发布的准确性与稳定性。
2026-10-02 14:37
IP属地：广东深圳
职位福利
大专经验不限ScrapyPandasMySQL运维开发经验Lin
深圳卡思科电子有限公司
不需要融资 · 100-499人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
2-4万/月
Python经验不限本科架构设计经验Linux开发/部署经验分布式经验微服务经验机器学习经验PyTorchTensorFlowMongoDB
深圳 龙华区
收藏职位
