广州·海珠区
职位详情
【岗位职责】
1、参与分布式网络爬虫系统及其数据库的架构设计与开发工作；
2、深入研究爬虫核心算法策略，优化抓取逻辑，制定有效的反屏蔽机制，合理调度资源，提高多媒体数据采集的效率与准确性；
3、主导数据平台搭建，完成数据清洗、加工与管理，提供稳定高效的数据服务支持；
4、理解大数据相关业务需求，进行技术方案设计并推动落地执行；
5、响应各业务线在使用数据平台过程中遇到的问题，进行问题排查并提出可行性优化建议；
【任职要求】
1、第一学历须为本科及以上学历；
2、工作经历中不得包含任何外包性质项目经验；
3、具备3年以上使用Python进行爬虫开发的经验，曾实际操作过抖音视频、快手视频或小红书等平台之一的数据采集任务；
4、具有Web逆向能力，熟悉主流Web反爬手段，掌握多种破解技术，如hook、Js防护绕过、代码混淆分析、逆向调试、App防破解及加固等相关技能；
5、精通http协议及xpath、csspath、正则表达式等数据提取技术；
6、具备自主开发算法或运用第三方工具实现验证码自动识别与通过的实际经验；
7、熟练运用Python对接MySQL、MongoDB、Redis等数据库，并熟悉RabbitMQ、Kafka等常用消息队列组件；
8、第一学历为211院校及以上者优先考虑；
1、参与分布式网络爬虫系统及其数据库的架构设计与开发工作；
2、深入研究爬虫核心算法策略，优化抓取逻辑，制定有效的反屏蔽机制，合理调度资源，提高多媒体数据采集的效率与准确性；
3、主导数据平台搭建，完成数据清洗、加工与管理，提供稳定高效的数据服务支持；
4、理解大数据相关业务需求，进行技术方案设计并推动落地执行；
5、响应各业务线在使用数据平台过程中遇到的问题，进行问题排查并提出可行性优化建议；
【任职要求】
1、第一学历须为本科及以上学历；
2、工作经历中不得包含任何外包性质项目经验；
3、具备3年以上使用Python进行爬虫开发的经验，曾实际操作过抖音视频、快手视频或小红书等平台之一的数据采集任务；
4、具有Web逆向能力，熟悉主流Web反爬手段，掌握多种破解技术，如hook、Js防护绕过、代码混淆分析、逆向调试、App防破解及加固等相关技能；
5、精通http协议及xpath、csspath、正则表达式等数据提取技术；
6、具备自主开发算法或运用第三方工具实现验证码自动识别与通过的实际经验；
7、熟练运用Python对接MySQL、MongoDB、Redis等数据库，并熟悉RabbitMQ、Kafka等常用消息队列组件；
8、第一学历为211院校及以上者优先考虑；
2026-06-26 14:54
IP属地：广东广州
职位福利
本科3-5年爬虫工程师
广州筷子信息科技有限公司
B轮 · 100-499人
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
