职位详情
岗位职责:
1、负责分布式爬虫系统的开发与优化,提升数据采集效率、质量及系统稳定性;
2、参与数据清洗与预处理流程,确保数据的准确性与可用性;
3、研究并应用前沿技术,持续优化爬虫架构与数据处理方案;
4、承担数据平台后端功能的设计与实现工作。
任职要求:
1、熟练掌握Python,精通requests、scrapy、playwright等主流爬虫工具,具备规范的编码习惯与清晰的逻辑思维;
2、了解分布式系统原理与网络编程,具备分布式爬虫框架的实际开发经历;
3、熟悉常用数据库技术,如redis、mysql、mongodb等;
4、深刻理解HTTP协议,掌握HTML、CSS、JavaScript、Ajax、JS等前端相关技术;
加分项:
1、能高效使用各类AI编程辅助工具;
2、掌握go语言,具备大规模数据处理及数据平台开发管理经验者优先;
3、对大模型微调、推理、评测等方向有一定认知且愿意深入学习;
4、思路清晰,具备较强的学习能力,沟通协作良好,对待工作任务有责任心和主人翁意识。
1、负责分布式爬虫系统的开发与优化,提升数据采集效率、质量及系统稳定性;
2、参与数据清洗与预处理流程,确保数据的准确性与可用性;
3、研究并应用前沿技术,持续优化爬虫架构与数据处理方案;
4、承担数据平台后端功能的设计与实现工作。
任职要求:
1、熟练掌握Python,精通requests、scrapy、playwright等主流爬虫工具,具备规范的编码习惯与清晰的逻辑思维;
2、了解分布式系统原理与网络编程,具备分布式爬虫框架的实际开发经历;
3、熟悉常用数据库技术,如redis、mysql、mongodb等;
4、深刻理解HTTP协议,掌握HTML、CSS、JavaScript、Ajax、JS等前端相关技术;
加分项:
1、能高效使用各类AI编程辅助工具;
2、掌握go语言,具备大规模数据处理及数据平台开发管理经验者优先;
3、对大模型微调、推理、评测等方向有一定认知且愿意深入学习;
4、思路清晰,具备较强的学习能力,沟通协作良好,对待工作任务有责任心和主人翁意识。
2026-06-11 13:16
IP属地:湖北武汉
职位福利
大专1-3年GolangScrapy爬虫经验分布式经验MySQLRedisPython

北京智蓝云信科技有限公司
不需要融资 · 1000-9999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >








