搜索
登录注册

职位详情

岗位前置语:
1、科技型创业公司,小天花板级技术团队,事密则成。
2、接受线上、线下Part-time,结果导向,不拘泥于形式。
3、未来定位为一家以技术驱动业务的科技独角兽。

职位描述:

1、遵循robots协议,参与爬虫系统的建设与优化,满足各类业务数据需求;
2、负责分布式爬虫系统的建设,优化数据调度、抓取、解析、存储全栈流程;
3、帮助团队攻克网页信息抽取技术算法的难关,提升海量数据系统的抓取效果与性能。
4、关注最新数据挖掘、抓取技术,不断维护和优化现有爬虫框架,确保抓取的高效和稳定性。

职位要求:
1、本科或研究生以上学历,3-5年爬虫抓取采集相关工作经历;
2、熟悉主流爬取技术及爬虫框架工具,如Selenium/Puppeteer/Scrapy/PhantomJS等;
3、熟悉Python/Java/Go/C++其中一种语言,具备扎实的编码能力;
4、熟悉常见反爬封禁策略,并具备相关的实战经验。

加分项:
有产业链数据相关经验者优先考虑。
有大模型应用开发相关经验者优先考虑。
熟悉分布式爬虫框架(如StormCrawler、Heritrix等)
有大数据相关技术(如Hadoop、Spark、Kafka)的使用经验
2026-06-26 14:56
IP属地:浙江

职位福利

本科3-5年
企业发布信息图
问径(杭州)数字科技有限公司
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

python数据采集工程师
爬虫工程师经验不限本科Python爬虫开发数据采集
杭州 滨江区
爬虫开发工程师
8000-9000元/月
爬虫工程师1-3年本科PythonScrapyBeautifulSouprequests
杭州 上城区
爬虫开发工程师
1.3-1.5万元/月
爬虫工程师3-5年学历不限
杭州 临平区
高级数据采集工程师
2-3.5万元/月
爬虫工程师3-5年本科
杭州 余杭区
爬虫开发工程师
1-1.5万元/月
爬虫工程师3-5年本科数据开发爬虫/反爬Python
杭州 上城区
高级数据采集工程师
2-2.5万元/月
爬虫工程师5-10年大专爬虫
杭州 余杭区
高级爬虫开发工程师
1.3-2.6万元/月
爬虫工程师5-10年本科
杭州 西湖区
高级python开发工程师(爬虫方向)
2-4万元/月
爬虫工程师经验不限学历不限
杭州 余杭区
爬虫工程师
1000-6000元/月
爬虫工程师1-3年大专
杭州 西湖区