职位详情
工作职责:
1、参与爬虫系统的架构规划与编码实现;
2、负责分布式爬虫系统的设计与开发,完成多平台数据的采集与解析;
3、制定爬取策略及反屏蔽机制,优化页面抓取效率与数据准确性;
4、独立应对并解决开发过程中遇到的各类技术难题;
任职要求:
1、具备2年以上JS逆向实战经验,掌握scrapy等主流采集框架的应用。
2、精通JS逆向技术,包括常见加密方式、环境补全、日志插桩还原等相关技能。
3、深入理解至少一个数据领域,如电商、工商、司法、税务、商标专利、招投标等,了解保障数据完整性与时效性的方法。
4、熟悉mysql、mongdb、kafka、redis、rabbitmq的基本原理及常规操作。
加分项:
1、掌握验证码模型训练、账号风控、IP风控、jsvmp算法还原者优先考虑。
2、具有大规模爬虫项目经验,单数据源采集量达千万级以上者优先。
3、具备大型站点系统开发背景,如舆情监控、招投标平台等场景经验者优先。
4、具备产品意识者更佳。
岗位福利:节日福利、双休五险一金、餐补、带薪年假、股票期权、年终奖、定期体检
1、参与爬虫系统的架构规划与编码实现;
2、负责分布式爬虫系统的设计与开发,完成多平台数据的采集与解析;
3、制定爬取策略及反屏蔽机制,优化页面抓取效率与数据准确性;
4、独立应对并解决开发过程中遇到的各类技术难题;
任职要求:
1、具备2年以上JS逆向实战经验,掌握scrapy等主流采集框架的应用。
2、精通JS逆向技术,包括常见加密方式、环境补全、日志插桩还原等相关技能。
3、深入理解至少一个数据领域,如电商、工商、司法、税务、商标专利、招投标等,了解保障数据完整性与时效性的方法。
4、熟悉mysql、mongdb、kafka、redis、rabbitmq的基本原理及常规操作。
加分项:
1、掌握验证码模型训练、账号风控、IP风控、jsvmp算法还原者优先考虑。
2、具有大规模爬虫项目经验,单数据源采集量达千万级以上者优先。
3、具备大型站点系统开发背景,如舆情监控、招投标平台等场景经验者优先。
4、具备产品意识者更佳。
岗位福利:节日福利、双休五险一金、餐补、带薪年假、股票期权、年终奖、定期体检
2026-06-09 13:56
IP属地:上海
职位福利
本科1-3年网络爬虫技术分布式技术Redis爬虫开发经验反爬策略和实践经验爬虫工程师数据挖掘Python

上海凭安征信服务有限公司
不需要融资 · 100-499人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >











