新乡·红旗区
职位详情
【岗位职责】：
1、负责动态网页数据的采集工作，完成数据的分类、解析、分析、清洗及存储等全流程处理；
2、具备3年以上c#开发经验，编程基础牢固，熟练掌握io、多线程与并发编程技术；
3、开展爬虫核心技术研发与策略优化，保障所获数据的准确性与完整性；
4、主导技术攻关任务，解决项目实施过程中遇到的各项技术难题。
【岗位要求】：
1、本科及以上学历，计算机相关专业背景，具有3年以上爬虫领域工作经验；
2、熟悉网页抓取机制及相关技术，掌握正则表达式、httpClient、jSoup、Xpath、CSS选择器等信息提取方法，了解主流爬虫框架的使用；
3、具备良好的问题分析与解决能力，熟练运用常见爬虫及反爬应对技术，能够实现动态页面、浏览器模拟、App端数据抓取；
4、有自然语言处理、语法句法分析、文本分类/聚类、图像识别等相关实践经验者优先考虑；
5、具备hadoop、Spark、HBase、Storm、Hive等大数据平台的设计、部署与开发经验者优先；
6、需具备2年海外航空公司数据抓取经验，能有效应对国际场景下的PerimeterX、shape、Tls指纹、cloudflare、reCAPTCHA等反爬封锁机制；
1、负责动态网页数据的采集工作，完成数据的分类、解析、分析、清洗及存储等全流程处理；
2、具备3年以上c#开发经验，编程基础牢固，熟练掌握io、多线程与并发编程技术；
3、开展爬虫核心技术研发与策略优化，保障所获数据的准确性与完整性；
4、主导技术攻关任务，解决项目实施过程中遇到的各项技术难题。
【岗位要求】：
1、本科及以上学历，计算机相关专业背景，具有3年以上爬虫领域工作经验；
2、熟悉网页抓取机制及相关技术，掌握正则表达式、httpClient、jSoup、Xpath、CSS选择器等信息提取方法，了解主流爬虫框架的使用；
3、具备良好的问题分析与解决能力，熟练运用常见爬虫及反爬应对技术，能够实现动态页面、浏览器模拟、App端数据抓取；
4、有自然语言处理、语法句法分析、文本分类/聚类、图像识别等相关实践经验者优先考虑；
5、具备hadoop、Spark、HBase、Storm、Hive等大数据平台的设计、部署与开发经验者优先；
6、需具备2年海外航空公司数据抓取经验，能有效应对国际场景下的PerimeterX、shape、Tls指纹、cloudflare、reCAPTCHA等反爬封锁机制；
2026-07-24 12:10
IP属地：河南新乡
职位福利
学历不限3-5年爬虫
新乡市快乐飞航空票务服务有限公司
未融资 · 100-499人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
