职位详情
职位描述:
1、负责网络爬虫系统的开发与爬虫策略的优化,实现多平台数据的采集与分析;
2、完成客户数据的采集、抓取、解析及入库等日常数据处理工作;
3、参与公司爬虫核心算法的设计与策略优化,掌握采集系统的任务调度机制;
4、制定高效的爬虫策略与反屏蔽方案,提高页面抓取效率与数据质量,增强系统稳定性与可扩展性;
5、实时跟踪爬虫运行状态,及时响应监控告警信息;
任职资格:
1. 本科及以上学历,具备2年以上网络爬虫或分布式数据采集开发经验,能力突出者学历可适当放宽;
2. 精通python语言,拥有扎实的编程基础和良好的代码设计能力;
3. 掌握爬虫技术原理,熟悉Scrapy、pyspider等主流爬虫框架,能有效应对账号封禁、IP封锁、验证码识别、页面反爬等挑战;
4. 熟练运用python中request、xpath、BeautifulSoup、正则表达式等相关工具模块;
5. 了解XHTML、CSS、JavaScript、AJAX等前端技术原理;
6. 熟悉mysql、mongodb、redis等数据库的基本操作;
7. 熟悉Linux操作系统及常用命令,掌握Git版本控制工具的使用;
8. 具备较强的业务理解与逻辑转化能力,积极进取,具备团队协作意识,责任心强,沟通良好,抗压能力强;
加分项:了解ast抽象语法树,具备rpa开发经验、golang使用经验,或有图表类数据爬取项目经历
1、负责网络爬虫系统的开发与爬虫策略的优化,实现多平台数据的采集与分析;
2、完成客户数据的采集、抓取、解析及入库等日常数据处理工作;
3、参与公司爬虫核心算法的设计与策略优化,掌握采集系统的任务调度机制;
4、制定高效的爬虫策略与反屏蔽方案,提高页面抓取效率与数据质量,增强系统稳定性与可扩展性;
5、实时跟踪爬虫运行状态,及时响应监控告警信息;
任职资格:
1. 本科及以上学历,具备2年以上网络爬虫或分布式数据采集开发经验,能力突出者学历可适当放宽;
2. 精通python语言,拥有扎实的编程基础和良好的代码设计能力;
3. 掌握爬虫技术原理,熟悉Scrapy、pyspider等主流爬虫框架,能有效应对账号封禁、IP封锁、验证码识别、页面反爬等挑战;
4. 熟练运用python中request、xpath、BeautifulSoup、正则表达式等相关工具模块;
5. 了解XHTML、CSS、JavaScript、AJAX等前端技术原理;
6. 熟悉mysql、mongodb、redis等数据库的基本操作;
7. 熟悉Linux操作系统及常用命令,掌握Git版本控制工具的使用;
8. 具备较强的业务理解与逻辑转化能力,积极进取,具备团队协作意识,责任心强,沟通良好,抗压能力强;
加分项:了解ast抽象语法树,具备rpa开发经验、golang使用经验,或有图表类数据爬取项目经历
2026-08-13 14:44
IP属地:四川成都
职位福利
本科5-10年Golang熟悉Linux环境ast抽象语法树RPA数据处理经验爬虫开发经验计算机相关专业反爬策略和实践经验爬虫工程师Python

四川火星熊猫科技有限公司
不需要融资 · 20-99人


鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >












