搜索
登录注册

职位详情

【工作职责】
1、负责构建高效可靠的网络爬虫系统,实现对多平台、多种类型数据的采集与处理。
2、深入分析各类反爬策略,如验证码识别、IP限制、行为监控等,并制定有效应对措施,确保数据抓取的连续性与稳定性。
3、参与数据清洗、去重、存储及初步分析流程的设计与开发工作。
4、协同前后端团队,支持数据可视化功能、数据管理平台及相关内部工具的建设与维护。
5、参与系统架构优化,改进爬虫调度机制与数据存储方案,提升整体性能和扩展能力。
6、关注爬虫技术发展趋势,持续迭代数据采集方法与工具体系。
7、协助团队完成日常技术问题定位及系统运维保障任务。

【任职要求】
1、本科及以上学历,计算机、软件工程或相关专业背景。
2、具有3年以上爬虫开发经验,掌握常见反爬虫机制及其解决方案。
3、具备全栈开发能力,熟悉前后端开发技术:
前端:熟练使用HTML/CSS/JavaScript,至少掌握Vue.js或React其中之一;
后端:熟悉Java及Spring Boot/Spring Cloud框架,或具备Node.js开发能力。
4、掌握数据抽取与清洗技术(如XPath、正则表达式、解析库等),有结构化与非结构化数据处理实践经验。
5、了解主流数据存储方案,包括关系型数据库(MySQL、PostgreSQL等)和NoSQL数据库(MongoDB、Redis等)。
6、熟悉网络协议及HTTP/HTTPS通信原理,能够分析请求与响应过程,熟练使用抓包工具(如Charles、Fiddler等)。

优先/加分条件:
1、精通Python及常用爬虫框架(如Scrapy、Selenium、Playwright等),了解分布式爬虫架构原理。
2、具备分布式爬虫系统设计经验,熟悉消息队列(Kafka、RabbitMQ等)和任务调度机制。

【工作形式】
1、支持 100% 远程办公(无需到岗),或以项目制方式兼职合作(按交付节点结算);
2、工作时间灵活,按时完成项目节点即可,需配合团队进行线上进度同步。
2026-07-04 12:16
IP属地:广东深圳

职位福利

本科3-5年JavaSpring/Spring BootJavaScriptVue全栈侧重前端HTMLMySQL/Redis/MongoDB计算机相关专业全栈项目经验
企业发布信息图
深圳市乐有家控股集团有限公司
不需要融资 · 1000-9999人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

中级全栈开发工程师(侧重后端方向)
1-1.5万元/月
全栈工程师3-5年本科GolangJava全栈侧重后端VuePython
深圳 福田区
中级/高级全栈开发工程师-React N
1.5-2.2万元/月
全栈工程师3-5年本科CSS后端开发经验JavaScriptVuePHP全栈无侧重HTMLNode.jsMySQL/Redis/MongoDB计算机相关专业React全栈项目经验
深圳 福田区
全栈开发工程师(软件方向)
1.1-2万元/月
全栈工程师1-3年本科
深圳 福田区
全栈开发工程师
1.5-1.6万元/月
全栈工程师3-5年本科JavaScriptHTMLCSSTypeScript全栈无侧重前端开发经验后端开发经验
深圳 福田区
全栈开发工程师(软件开发)
1.1-2万元/月
全栈工程师1-3年硕士
深圳 福田区
初级/中级全栈开发工程师
7000-12000元/月
全栈工程师1-3年本科后端开发经验PHP前端开发经验RubyPython全栈项目经验
深圳 福田区
全栈开发(工作地天津)
1.6-2.5万元/月
全栈工程师10年以上本科
深圳 福田区
全栈开发工程师(500强外资企业)
1.8-2.5万元/月
全栈工程师1-3年本科前端开发PythonJavaMySQL
深圳 福田区
全栈开发工程师
1.5-2.2万元/月
全栈工程师3-5年本科AWS/阿里云/linux/K8SReactPHPMySQL/Redis/MongoDB全栈无侧重全栈项目经验
深圳 福田区 岗厦
初级全栈开发工程师(侧重后端)
9000-13000元/月
全栈工程师1-3年本科JavaC/C++全栈侧重后端Python
深圳 福田区