职位详情
职位描述
1. 参与分布式爬虫架构及数据采集系统的设计与实现
2. 制定爬虫调度策略与反屏蔽机制,优化页面抓取效率与数据准确性
3. 承担海量文本、图片及结构化数据的采集、清洗与格式转换任务
4. 分析目标网站页面结构特征,挖掘网络信息规律,总结共性模式
【岗位要求】
1. 基础能力扎实,熟练掌握常见数据结构与算法,精通Java IO、多线程、集合框架等核心知识
2. 熟悉缓存技术、消息队列、并发处理框架以及异步编程模型
3. 掌握Internet基础协议(如TCP/IP、HTTP等)的工作原理
4. 熟悉Appium、Selenium、PhantomJS、WebDriver等相关自动化工具
5. 具备从网页结构中实现自动识别与数据抽取算法,并输出结构化结果者优先
6. 拥有可视化采集经验,或熟悉基于JS的规则自动生成、分布式采集系统者优先
7. 具备良好的协作精神,热爱技术研发工作
1. 参与分布式爬虫架构及数据采集系统的设计与实现
2. 制定爬虫调度策略与反屏蔽机制,优化页面抓取效率与数据准确性
3. 承担海量文本、图片及结构化数据的采集、清洗与格式转换任务
4. 分析目标网站页面结构特征,挖掘网络信息规律,总结共性模式
【岗位要求】
1. 基础能力扎实,熟练掌握常见数据结构与算法,精通Java IO、多线程、集合框架等核心知识
2. 熟悉缓存技术、消息队列、并发处理框架以及异步编程模型
3. 掌握Internet基础协议(如TCP/IP、HTTP等)的工作原理
4. 熟悉Appium、Selenium、PhantomJS、WebDriver等相关自动化工具
5. 具备从网页结构中实现自动识别与数据抽取算法,并输出结构化结果者优先
6. 拥有可视化采集经验,或熟悉基于JS的规则自动生成、分布式采集系统者优先
7. 具备良好的协作精神,热爱技术研发工作
2026-09-18 14:49
IP属地:江苏苏州
职位福利
本科3-5年爬虫

苏州新歌科技有限责任公司
天使轮 · 0-20人


鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
连云港赣榆区招工地力工
260-280元/天
力工6-10人
连云港 赣榆区2026年09月22日 09:18

仲先生
刚刚活跃







