长沙·开福区
职位详情
岗位职责：
1. 负责完成公司商业查询数据、电商平台数据的采集任务；
2. 负责构建分布式爬虫系统，维护分布式爬虫服务，设计并实现任务调度模块；
3. 负责解决各类反爬机制带来的技术挑战；
4. 参与公司底层数据相关平台及工具的研发与优化。
任职要求：
1. 本科及以上学历，计算机或相关专业，具备3年以上爬虫领域实际工作经验；
2. 熟练掌握Python语言，具有至少3年基于Python的开发实践；
3. 具备大规模数据抓取、解析、清洗和存储的项目经历；
4. 熟悉Linux操作系统环境；
5. 熟悉Mysql、redis等数据库技术，有处理海量数据存储场景经验者优先；
6. 掌握逆向技术（含app、so文件逆向）、极验、瑞数等防护绕过方法者优先；具备安卓签名校验对抗经验；
7. 有多个网站数据采集系统开发或通用采集工具研发经验者优先；
8. 具备机器学习、自然语言处理方向研发背景者优先
1. 负责完成公司商业查询数据、电商平台数据的采集任务；
2. 负责构建分布式爬虫系统，维护分布式爬虫服务，设计并实现任务调度模块；
3. 负责解决各类反爬机制带来的技术挑战；
4. 参与公司底层数据相关平台及工具的研发与优化。
任职要求：
1. 本科及以上学历，计算机或相关专业，具备3年以上爬虫领域实际工作经验；
2. 熟练掌握Python语言，具有至少3年基于Python的开发实践；
3. 具备大规模数据抓取、解析、清洗和存储的项目经历；
4. 熟悉Linux操作系统环境；
5. 熟悉Mysql、redis等数据库技术，有处理海量数据存储场景经验者优先；
6. 掌握逆向技术（含app、so文件逆向）、极验、瑞数等防护绕过方法者优先；具备安卓签名校验对抗经验；
7. 有多个网站数据采集系统开发或通用采集工具研发经验者优先；
8. 具备机器学习、自然语言处理方向研发背景者优先
2026-05-17 14:49
IP属地：湖南长沙
职位福利
本科3-5年爬虫redis
上海凭安征信服务有限公司
不需要融资 · 100-499人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
大数据研发工程师
1.5-2.5万元/月
数据开发1-3年本科要求数据开发经验数据建模经验Kafka非外包类计算机相关专业Spark数据平台开发经验Flink数学/统计相关专业PythonSQL
长沙 开福区
张女士 · 凭安信用5日内活跃
收藏职位
