下载鱼泡直聘APP, 求职招聘快人一步!

搜索
登录注册

职位详情

一、工作职责
1.负责网络爬虫系统的设计、开发与性能优化,实现大规模数据的采集与处理;
2.深入分析各类反爬策略,制定有效应对方案,保障数据抓取的持续稳定;
3.对采集数据进行质量监控,完成数据清洗、存储及初步分析工作;
4.持续维护现有爬虫架构,优化运行效率与数据获取精度;
5.跟进前沿爬虫技术,探索分布式抓取、动态页面解析等手段,增强整体采集能力;
6.应对IP封锁、验证码拦截等访问限制,迭代优化爬取逻辑与调度策略;

二、任职要求
1.本科及以上学历,计算机或软件工程相关专业背景,具备2年以上开发经验;
2.精通至少一种编程语言:GO、PHP、JAVA、python等,编码规范良好,基础扎实;
3.有分布式爬虫实际项目经验,熟练使用主流爬虫框架,掌握HTTP协议、网页解析及动态内容抓取技术;
4.了解常见网站反爬机制,熟悉代理IP切换、验证码处理、User-Agent伪装等应对方法;
5.具备数据清洗与结构化存储能力,掌握MySQL、MongoDB、Elasticsearch等数据库技术;
6.具备良好的代码管理意识和团队协作能力,工作积极主动,沟通能力强。
2026-11-11 14:47
IP属地:四川成都

职位福利

本科1-3年gophppythonjava
企业发布信息图
中电金信软件有限公司
不需要融资 · 10000人以上
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

9千-1万/月
爬虫工程师1-3年大专
成都 武侯区
20-25万/月
爬虫工程师5-10年本科
成都 武侯区
1.4-1.8万/月
爬虫工程师1-3年本科
成都 武侯区
8千-1.3万/月
爬虫工程师1-3年大专JavaPHPSqlFlaskDjangoPyQtMySQLRedis
成都 金牛区
爬虫工程师Python
成都
1.5-3万/月
爬虫工程师3-5年本科反爬虫RPA熟悉影刀云扩
成都
1.5-2万/月
爬虫工程师3-5年本科
成都 武侯区
1.2-1.6万/月
爬虫工程师3-5年本科数据反爬信息抓取和整合
成都 金牛区
python高级工程师
爬虫工程师Python
成都
2.2-2.3万/月
爬虫工程师5-10年本科
成都 武侯区