职位详情
工作周期:长期兼职
每周工期:无要求
工作时间:不限
工作时段:不限
结算方式:月结
招聘截止时间:2026-10-12
岗位职责:
1、参与分布式爬虫系统的搭建与性能优化,提高数据抓取的效率与准确性;
2、制定合理的爬取方案,应对复杂页面结构及各类反爬技术挑战;
3、负责大规模爬虫集群的部署与日常运维,保障系统高可用性;
4、协助完成数据清洗与预处理环节,确保采集数据的真实有效;
5、跟踪前沿技术动态,推动爬虫架构和数据处理流程的持续升级。
任职要求:
1、熟练掌握Python语言,具备扎实的编程功底和算法理解能力;
2、了解分布式架构与网络通信原理,有实际开发分布式爬虫框架的经历;
3、熟悉HTTP协议机制,能灵活运用HTML、CSS、JavaScript等前端技术解析网页;
4、能够有效应对反爬策略,包括但不限于验证码破解、JS加密分析等场景;
5、具有海量数据处理背景,至少掌握一种数据库系统,如MySQL、MongoDB等。
每周工期:无要求
工作时间:不限
工作时段:不限
结算方式:月结
招聘截止时间:2026-10-12
岗位职责:
1、参与分布式爬虫系统的搭建与性能优化,提高数据抓取的效率与准确性;
2、制定合理的爬取方案,应对复杂页面结构及各类反爬技术挑战;
3、负责大规模爬虫集群的部署与日常运维,保障系统高可用性;
4、协助完成数据清洗与预处理环节,确保采集数据的真实有效;
5、跟踪前沿技术动态,推动爬虫架构和数据处理流程的持续升级。
任职要求:
1、熟练掌握Python语言,具备扎实的编程功底和算法理解能力;
2、了解分布式架构与网络通信原理,有实际开发分布式爬虫框架的经历;
3、熟悉HTTP协议机制,能灵活运用HTML、CSS、JavaScript等前端技术解析网页;
4、能够有效应对反爬策略,包括但不限于验证码破解、JS加密分析等场景;
5、具有海量数据处理背景,至少掌握一种数据库系统,如MySQL、MongoDB等。
2026-05-10 13:42
IP属地:北京
职位福利
大专经验不限

北京凯金阿尔法科技有限责任公司
B轮 · 20-99人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >





