职位详情
岗位内容:
1. 负责爬虫架构的规划与编码,实现高效率、高稳定性的数据抓取与处理流程。
2. 执行数据清洗、去重及标准化操作,保障数据准确性符合业务使用标准。
3. 持续优化采集程序,提升抓取速度与成功率,减少错误率并规避封禁风险。
4. 编写自动化测试脚本,确保爬虫系统长期运行的稳定性与可靠性。
任职要求:
1. 精通 Python 编程,熟悉 HTTP 协议及相关反爬机制应对策略。
2. 具备扎实的算法与数据结构知识,掌握多线程和异步编程技术。
3. 熟练使用多种数据库技术,包括 MySQL、Redis、MongoDB,并有实际项目经验。
4. 拥有良好的英文阅读能力,可流畅查阅英文技术文档及相关资料。
1. 负责爬虫架构的规划与编码,实现高效率、高稳定性的数据抓取与处理流程。
2. 执行数据清洗、去重及标准化操作,保障数据准确性符合业务使用标准。
3. 持续优化采集程序,提升抓取速度与成功率,减少错误率并规避封禁风险。
4. 编写自动化测试脚本,确保爬虫系统长期运行的稳定性与可靠性。
任职要求:
1. 精通 Python 编程,熟悉 HTTP 协议及相关反爬机制应对策略。
2. 具备扎实的算法与数据结构知识,掌握多线程和异步编程技术。
3. 熟练使用多种数据库技术,包括 MySQL、Redis、MongoDB,并有实际项目经验。
4. 拥有良好的英文阅读能力,可流畅查阅英文技术文档及相关资料。
2026-06-05 20:55
IP属地:陕西西安
职位福利
学历不限3-5年Python爬虫开发数据采集数据清洗反爬虫分布式爬虫网页自动化

陕西会飞的猫网络科技所(个人独资企业)
0-20人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
python后端开发工程师
1.6-3万元/月
Python1年以下本科GolangC++分布式经验ElasticsearchMySQL备份容灾开发KafkaRedis云计算经验架构设计经验Kubernetes
西安

先生 · 腾讯5日内活跃









