搜索
登录注册

职位详情

职位名称:电商数据采集工程师(全职/兼职/API合作)有数据源也可以合作

职位类型:技术开发|远程|薪资面议(根据经验及合作方式具体洽谈)

职位描述:
我们致力于搭建多平台电商商品数据监测系统,现需高效获取以下平台商品详情数据:
覆盖平台:淘宝/天猫(TB)、京东(JD)、拼多多(PDD)、抖音电商(DY)、快手小店(KS)、美团(MT)、饿了么(ELM)等。
数据用途:价格动态监控、竞品分析、市场趋势预测等深度数据挖掘场景。

岗位职责:
设计并开发高稳定性、高精度的电商平台数据采集系统,支持日均百万级数据请求;

攻克平台反爬机制(加密参数、IP封禁、行为验证等),保障数据获取连续性;

实现多维度数据解析:商品基础信息、SKU价格、促销活动、用户评价、销量等;

构建数据清洗及校验机制,确保字段完整性与准确性(误差率≤0.1%);

提供标准化数据输出接口(JSON/MySQL),支持业务团队实时调用。

任职要求:
技术能力:

精通Python/Java,熟悉Scrapy、Selenium、MitmProxy等爬虫框架;

掌握分布式爬虫架构(Redis/Kafka/集群部署),具备高并发场景优化经验;

熟悉JS逆向、字体反爬、验证码破解等技术难点;

了解APP端数据抓取方案(Charles/Fiddler抓包、Xposed框架等)。

经验要求:

3年以上电商数据采集实战经验,需提供成功案例(如商品详情页完整字段抓取);

熟悉各平台API调用限制政策及法律合规边界。

协作要求:

兼职/合作需承诺响应时效(如系统故障2小时内修复);

API供应商需提供历史稳定性报告(如99.9%可用性证明)。

加分项:
自研成熟电商数据API接口,支持多平台即接即用;
拥有抖音/快手等直播电商数据获取经验;
熟悉价格监测模型构建及数据可视化方案。
2025-10-26 15:25
IP属地:浙江
企业发布信息图
杭州信羊网络科技有限公司
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

2-2.5万/月
爬虫工程师5-10年本科
杭州 余杭区
3.5-6.5万/月
爬虫工程师5-10年本科
杭州 余杭区
2-2.5万/月
爬虫工程师5-10年大专爬虫
杭州 余杭区
1.5-1.9万/月
爬虫工程师1-3年本科JavaPythonGO爬虫,逆向,对抗移动端安全项目经验
杭州 余杭区
2-4万/月
爬虫工程师经验不限学历不限
杭州 余杭区
2-2.5万/月
爬虫工程师5-10年大专爬虫
杭州 余杭区
2-3.5万/月
爬虫工程师3-5年本科
杭州 余杭区
9千-1万/月
爬虫工程师经验不限大专五险一金年终奖周末双休
杭州 西湖区 黄龙
9千-1.1万/月
爬虫工程师经验不限大专
杭州 拱墅区 天水