广州·越秀区
职位详情
岗位职责：
1、负责完成公司的数据采集任务代码编写，进行多平台信息的采集、清洗、入库等操作；
2、负责爬虫项目的集成、部署，任务调度等工作；
3、负责管理项目工程数据提取、清洗、结构化、入库等工作；
4、维护及稳定现有的爬虫相关工作；
任职要求：
1、有大规模数据采集经验优先；
2、至少熟悉mysql、mongodb、redis、clickhouse等数据库；
3、熟悉scrapy-redis或其他分布式爬虫框架、了解网页数据采集原理及技术，正则、Xpath等数据提取技术；
4、具备良好的分析解决能力，能独立完成爬虫代码编写以及服务部署爬虫；
5、熟悉python编程，熟练使用多线程编程。
6、熟悉服务器linux命令，有良好的编码习惯。
1、负责完成公司的数据采集任务代码编写，进行多平台信息的采集、清洗、入库等操作；
2、负责爬虫项目的集成、部署，任务调度等工作；
3、负责管理项目工程数据提取、清洗、结构化、入库等工作；
4、维护及稳定现有的爬虫相关工作；
任职要求：
1、有大规模数据采集经验优先；
2、至少熟悉mysql、mongodb、redis、clickhouse等数据库；
3、熟悉scrapy-redis或其他分布式爬虫框架、了解网页数据采集原理及技术，正则、Xpath等数据提取技术；
4、具备良好的分析解决能力，能独立完成爬虫代码编写以及服务部署爬虫；
5、熟悉python编程，熟练使用多线程编程。
6、熟悉服务器linux命令，有良好的编码习惯。
2026-06-26 14:26
IP属地：广东
职位福利
本科1-3年
广州众成大数据科技有限公司
A轮 · 20-99人
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
