搜索
登录注册

职位详情

1、掌握Python语言,具备面向对象编程能力,能够熟练运用多线程与多进程技术(如threading、multiprocessing)提升爬虫执行效率
2、了解协程及异步编程机制,熟悉asyncio、aiohttp等工具,用于处理高并发网络请求
3、精通多种数据存储方案:关系型数据库方面,掌握MySQL的索引优化、性能调优及事务管理;非关系型数据库方面,熟练使用MongoDB存储非结构化数据,以及Redis实现缓存和消息队列功能
4、深刻理解网页DOM树结构,可高效解析动态加载页面,熟练应用XPath、CSS选择器、正则表达式等多种数据提取技术
5、熟练操作Selenium、DrissionPage等浏览器自动化框架,实现复杂页面的数据抓取
6、熟悉Linux系统常用命令,具备基本的服务器操作能力

加分项:
1、掌握至少一种主流爬虫框架,如feapder或Scrapy
2、具备基础JS逆向实战经验,了解SHA256、AES、MD5等加密算法中的一种
3、有构建爬虫监控系统相关实践经验
2026-10-02 12:39
IP属地:湖北武汉

职位福利

本科经验不限
企业发布信息图
北京方寸无忧科技发展有限公司
B轮 · 100-499人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

9千-1.4万/月
爬虫工程师3-5年学历不限酒店爬虫经验
武汉 洪山区
8-9千/月
爬虫工程师1-3年大专爬虫
武汉 江夏区
8-9千/月
爬虫工程师Python1-3年大专爬虫
武汉 江夏区
100-110元/天
爬虫工程师经验不限本科
武汉
8千-1万/月
爬虫工程师3-5年大专
武汉 江夏区 光谷
1-1.6万/月
爬虫工程师5-10年本科
武汉 洪山区 关山
8千-1万/月
爬虫工程师1-3年大专PythonHTMLCSS数据采集爬虫开发反爬虫Scrapyrequests数据清洗爬虫监控维护反反爬实践
武汉
1-1.5万/月
爬虫工程师1-3年大专
武汉
1.3-2万/月
爬虫工程师3-5年大专Python
武汉