搜索
登录注册

职位详情

工作职责:
1、参与爬虫系统的架构规划与编码实现;
2、负责分布式爬虫系统的设计与开发,完成多平台数据的采集与解析;
3、制定爬取策略及反屏蔽机制,优化页面抓取效率与数据准确性;
4、独立应对并解决开发过程中遇到的各类技术难题;

任职要求:
1、具备2年以上JS逆向实战经验,掌握scrapy等主流采集框架的应用。
2、精通JS逆向技术,包括常见加密方式、环境补全、日志插桩还原等相关技能。
3、深入理解至少一个数据领域,如电商、工商、司法、税务、商标专利、招投标等,了解保障数据完整性与时效性的方法。
4、熟悉mysql、mongdb、kafka、redis、rabbitmq的基本原理及常规操作。

加分项:
1、掌握验证码模型训练、账号风控、IP风控、jsvmp算法还原者优先考虑。
2、具有大规模爬虫项目经验,单数据源采集量达千万级以上者优先。
3、具备大型站点系统开发背景,如舆情监控、招投标平台等场景经验者优先。
4、具备产品意识者更佳。

岗位福利:节日福利、双休五险一金、餐补、带薪年假、股票期权、年终奖、定期体检
2026-06-09 13:56
IP属地:上海

职位福利

本科1-3年网络爬虫技术分布式技术Redis爬虫开发经验反爬策略和实践经验爬虫工程师数据挖掘Python
企业发布信息图
上海凭安征信服务有限公司
不需要融资 · 100-499人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

机器人数据采集+五险一金
8000-9000元/月
数据采集经验不限学历不限手稳
上海 长宁区
数据采集
8000-9000元/月
数据采集经验不限学历不限
上海 长宁区
数据采集岗
7000-10000元/月
数据采集经验不限学历不限
上海 长宁区
数据采集员
8000-12000元/月
数据采集本科
上海 长宁区
数据采集
6000-10000元/月
数据采集1-3年本科活动运营
上海 长宁区
机器人数据采集
7000-10000元/月
数据采集1-3年学历不限
上海 浦东新区
各地方言采集 标注(居家)
50-400元/天
兼职数据采集经验不限学历不限居家办公时间自由多劳多得
上海 松江区
数据采集员
5000-7000元/月
兼职数据采集经验不限大专
上海 徐汇区 漕宝路
机器人数据采集
5000-6000元/月
数据采集经验不限大专机器人灵巧手人工智能具身智能机械臂
上海 黄浦区