职位详情
岗位职责:
1.设计、开发和维护高效稳定的网络爬虫系统,支持多平台、多协议数据采集
2.对接反爬机制,实现动态页面渲染、验证码识别、登录态管理等关键技术突破
3.清洗、解析、结构化海量非标数据,保障数据质量与入库时效性
4.优化爬取策略与调度逻辑,提升并发效率与资源利用率
5.配合数据分析与业务团队,提供定制化数据采集方案与技术支持
任职要求:
1. 熟练掌握Python,熟悉requests、Scrapy、Selenium、Playwright等主流爬虫框架
2.理解HTTP协议、HTML/CSS/JS基础及常见反爬原理,具备实战绕过经验
3. 熟悉MySQL、MongoDB或Elasticsearch等数据库,能完成数据存储与简单处理
4.具备Linux环境开发调试能力,了解Docker、Redis、消息队列等加分
1.设计、开发和维护高效稳定的网络爬虫系统,支持多平台、多协议数据采集
2.对接反爬机制,实现动态页面渲染、验证码识别、登录态管理等关键技术突破
3.清洗、解析、结构化海量非标数据,保障数据质量与入库时效性
4.优化爬取策略与调度逻辑,提升并发效率与资源利用率
5.配合数据分析与业务团队,提供定制化数据采集方案与技术支持
任职要求:
1. 熟练掌握Python,熟悉requests、Scrapy、Selenium、Playwright等主流爬虫框架
2.理解HTTP协议、HTML/CSS/JS基础及常见反爬原理,具备实战绕过经验
3. 熟悉MySQL、MongoDB或Elasticsearch等数据库,能完成数据存储与简单处理
4.具备Linux环境开发调试能力,了解Docker、Redis、消息队列等加分
2026-05-19 14:24
IP属地:河南
职位福利
学历不限经验不限

郑州铉铭网络科技有限公司

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
双休数据采集工程师(8K-10K)
8000-10000元/月
数据采集1-3年大专采集机器人数据采集Pythonlinux熟悉编程周末双休五险一金偶尔出差上市公司
北京 海淀区





