职位详情
岗位职责:
1、负责网络爬虫系统的开发与爬虫策略优化,实现多平台数据的采集与分析;
2、完成日常数据抓取、解析处理及数据入库等相关工作;
3、主动思考并探索爬虫技术在实际业务场景中的应用价值,参与制定数据高效利用方案,并从数据完整性与合理性角度提出优化建议;
4、主导网络爬虫核心技术的研究方向,持续探索系统性能优化路径,提升爬虫架构的稳定性与可扩展能力;
5、设计高效的爬取策略与反屏蔽机制,提高网页抓取效率与数据质量。
任职要求:
1. 统招本科及以上学历,计算机相关专业,具备扎实的计算机理论基础,2年以上爬虫项目实战经验及团队管理经历;
2. 精通Python语言,拥有良好的编程习惯与较强的程序设计能力;
3. 深入理解爬虫工作机制,熟练掌握Scrapy、pyspider等主流爬虫框架,具备应对账号封禁、IP封锁、验证码识别、页面反爬限制等问题的实际解决方案;
4. 熟练运用Python中request、xpath、BeautifulSoup、正则表达式等数据提取工具;
5. 具备Django、flask等Web框架的基础应用能力;
6. 熟悉MySQL、MongoDB、Redis的使用,了解Hadoop、hbase等相关大数据技术;
7. 具备较强的业务理解与数据转化能力,积极进取,富有团队协作意识,责任心强,沟通协调能力良好,能适应高强度工作压力;
1、负责网络爬虫系统的开发与爬虫策略优化,实现多平台数据的采集与分析;
2、完成日常数据抓取、解析处理及数据入库等相关工作;
3、主动思考并探索爬虫技术在实际业务场景中的应用价值,参与制定数据高效利用方案,并从数据完整性与合理性角度提出优化建议;
4、主导网络爬虫核心技术的研究方向,持续探索系统性能优化路径,提升爬虫架构的稳定性与可扩展能力;
5、设计高效的爬取策略与反屏蔽机制,提高网页抓取效率与数据质量。
任职要求:
1. 统招本科及以上学历,计算机相关专业,具备扎实的计算机理论基础,2年以上爬虫项目实战经验及团队管理经历;
2. 精通Python语言,拥有良好的编程习惯与较强的程序设计能力;
3. 深入理解爬虫工作机制,熟练掌握Scrapy、pyspider等主流爬虫框架,具备应对账号封禁、IP封锁、验证码识别、页面反爬限制等问题的实际解决方案;
4. 熟练运用Python中request、xpath、BeautifulSoup、正则表达式等数据提取工具;
5. 具备Django、flask等Web框架的基础应用能力;
6. 熟悉MySQL、MongoDB、Redis的使用,了解Hadoop、hbase等相关大数据技术;
7. 具备较强的业务理解与数据转化能力,积极进取,富有团队协作意识,责任心强,沟通协调能力良好,能适应高强度工作压力;
2026-06-28 13:27
IP属地:北京
职位福利
本科1-3年

北京盈科千信科技有限公司
不需要融资 · 100-499人


鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >









