职位详情
岗位职责:
1. 根据项目要求对目标站点实施数据采集、抓取及数据清洗工作;
2. 负责站点API接口的算法逆向分析;
3. 梳理站点反爬机制,并在项目调用API过程中实现反爬策略的规避;
4. 承担爬虫相关API的设计与开发任务;
5. 完成上级交办的其他相关工作内容。
任职资格:
1. 具备不少于2年爬虫开发实际经验。
2. 具备较强的问题分析与处理能力。
3. 具备良好的沟通协作意识,热衷于新技术的学习与研究。
4. 算法与数据结构基础扎实,熟练运用Python语言进行开发,掌握常用爬虫工具(如Scrapy、BeautifulSoup、Requests),熟悉并发编程技术,能结合Scrapy框架与Pyspider框架,配合Fiddler等工具完成抓包操作。
5. 掌握正则表达式的应用,具备数据清洗与解析能力;熟悉主流数据库系统,了解索引机制及SQL优化方法。
1. 根据项目要求对目标站点实施数据采集、抓取及数据清洗工作;
2. 负责站点API接口的算法逆向分析;
3. 梳理站点反爬机制,并在项目调用API过程中实现反爬策略的规避;
4. 承担爬虫相关API的设计与开发任务;
5. 完成上级交办的其他相关工作内容。
任职资格:
1. 具备不少于2年爬虫开发实际经验。
2. 具备较强的问题分析与处理能力。
3. 具备良好的沟通协作意识,热衷于新技术的学习与研究。
4. 算法与数据结构基础扎实,熟练运用Python语言进行开发,掌握常用爬虫工具(如Scrapy、BeautifulSoup、Requests),熟悉并发编程技术,能结合Scrapy框架与Pyspider框架,配合Fiddler等工具完成抓包操作。
5. 掌握正则表达式的应用,具备数据清洗与解析能力;熟悉主流数据库系统,了解索引机制及SQL优化方法。
2026-06-29 15:09
IP属地:广东广州
职位福利
大专3-5年Scrapy爬虫经验微服务经验DjangoMySQLFiddlerRedisSelenium逆向抓取Python

广州启云互联信息技术有限公司
未融资 · 20-99人


鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
python后端开发工程师
1-1.5万元/月
Python3-5年大专JavaDockerDjangoMySQLSparkFlaskKubernetesTensorFlow
广州 番禺区
python资深开发工程师
1.8-2万元/月
Python5-10年本科社交直播经验爬虫经验游戏行业经验DjangoMySQLKafkaRedisTornadoMongoDBFlask
广州 番禺区










