职位详情
岗位职责:
1、负责分布式爬虫系统的开发与优化,提升数据采集的效率、质量及系统稳定性;
2、参与数据清洗与预处理流程,确保数据的准确性与可用性;
3、研究并应用前沿技术,持续优化爬虫架构与数据处理方案;
4、承担数据平台后端功能的设计与实现工作。
任职要求:
1、熟练掌握Python,精通requests、scrapy、playwright等主流爬虫工具,具备规范的编码习惯与清晰的逻辑思维;
2、了解分布式架构与网络编程,具有分布式爬虫框架的实际开发经历;
3、熟悉常用数据库技术,包括redis、mysql、mongodb等;
4、深刻理解HTTP协议,掌握HTML、CSS、JavaScript、Ajax、JS等前端相关技术;
加分项:
1、能够熟练运用各类AI辅助编程工具;
2、掌握go语言,具备大规模数据处理及数据平台开发管理经验者优先;
3、对大模型微调、推理、评测等方向有一定认知且具备学习热情;
4、条理清晰,勤于学习,具备良好的沟通能力与团队合作精神,对待工作任务有较强的责任感和主人翁意识。
1、负责分布式爬虫系统的开发与优化,提升数据采集的效率、质量及系统稳定性;
2、参与数据清洗与预处理流程,确保数据的准确性与可用性;
3、研究并应用前沿技术,持续优化爬虫架构与数据处理方案;
4、承担数据平台后端功能的设计与实现工作。
任职要求:
1、熟练掌握Python,精通requests、scrapy、playwright等主流爬虫工具,具备规范的编码习惯与清晰的逻辑思维;
2、了解分布式架构与网络编程,具有分布式爬虫框架的实际开发经历;
3、熟悉常用数据库技术,包括redis、mysql、mongodb等;
4、深刻理解HTTP协议,掌握HTML、CSS、JavaScript、Ajax、JS等前端相关技术;
加分项:
1、能够熟练运用各类AI辅助编程工具;
2、掌握go语言,具备大规模数据处理及数据平台开发管理经验者优先;
3、对大模型微调、推理、评测等方向有一定认知且具备学习热情;
4、条理清晰,勤于学习,具备良好的沟通能力与团队合作精神,对待工作任务有较强的责任感和主人翁意识。
2026-05-17 14:11
IP属地:湖北武汉
职位福利
本科1-3年

北京智蓝云信科技有限公司
不需要融资 · 1000-9999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >







