职位详情
岗位职责:
1、负责分布式爬虫系统的架构设计与开发,确保高效稳定的数据采集能力;
2、根据业务需求实现多类型网站的数据抓取、解析与存储,优化爬取策略;
3、应对反爬机制,设计合理的请求调度与IP代理方案;
4、参与数据清洗与结构化处理流程,保障数据质量与一致性;
5、编写可维护的技术文档,持续优化系统性能与扩展性。
任职要求:
1、具备扎实的Python编程能力,熟练掌握异步编程与多线程技术;
2、熟悉主流爬虫框架及网络协议,能够独立完成网络请求模拟与响应解析;
3、了解常见反爬对抗技术,具备实际项目中突破限制的经验;
4、熟悉MySQL、MongoDB等数据库操作,能完成数据持久化设计;
5、具有良好的代码规范意识和团队协作能力,责任心强。
1、负责分布式爬虫系统的架构设计与开发,确保高效稳定的数据采集能力;
2、根据业务需求实现多类型网站的数据抓取、解析与存储,优化爬取策略;
3、应对反爬机制,设计合理的请求调度与IP代理方案;
4、参与数据清洗与结构化处理流程,保障数据质量与一致性;
5、编写可维护的技术文档,持续优化系统性能与扩展性。
任职要求:
1、具备扎实的Python编程能力,熟练掌握异步编程与多线程技术;
2、熟悉主流爬虫框架及网络协议,能够独立完成网络请求模拟与响应解析;
3、了解常见反爬对抗技术,具备实际项目中突破限制的经验;
4、熟悉MySQL、MongoDB等数据库操作,能完成数据持久化设计;
5、具有良好的代码规范意识和团队协作能力,责任心强。
2026-05-23 14:16
IP属地:广东深圳
职位福利
大专3-5年

深圳易堡贝科技有限公司
不需要融资 · 0-20人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >













