搜索
登录注册

职位详情

岗位职责:
1.负责目标网站的页面采集、信息提取及反爬机制破解;
2.承担多平台数据抽取、清洗、存储及服务化等研发与性能优化任务;
3.参与分布式网络爬虫系统的开发与架构设计,完成数据抓取与分析工作;
4.持续优化爬虫算法,提升系统运行稳定性与横向扩展能力;
5.独立应对开发过程中各类数据需求及接口相关技术问题。

任职要求:
1.本科及以上学历,计算机相关专业,具备3年以上相关领域工作经验;
2.深入掌握网页采集原理与技术手段,熟练运用正则表达式,能高效提取结构化与非结构化数据;
3.精通JAVA/PYTHON编程语言,了解数据库性能调优及常用缓存机制与策略;
4.熟练使用至少一种主流开源爬虫框架,具备反爬处理和验证码识别经验者优先;
5.熟悉互联网常见技术方案与通用解决路径,有源码级理解或开源项目贡献经历者优先;
6.具备出色的逻辑分析能力,热衷于攻克复杂技术难题,善于归纳与解决问题;
7.掌握APP脱壳、逆向反编译、JS解密等逆向工程技术者优先考虑。

加分项:
1)具备移动端App数据采集实战经验
2)具有Airflow、DolphinScheduler或xxl-job等开源调度系统部署经验
3)拥有浏览器插件实现数据采集的相关经历
2026-05-10 14:47
IP属地:陕西西安

职位福利

本科3-5年Nginx分布式经验MySQLMongoDB
企业发布信息图
西安易行慧通旅游发展有限公司
未融资 · 20-99人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

人工智能应用开发工程师
1.5-2万元/月
Python3-5年本科LangGraphLangChainRAG大语言模型Linux开发/部署经验LLM
西安 雁塔区
AI应用开发工程师
1.8-2.8万元/月
Python5-10年硕士
西安 雁塔区
Python开发工程师
1-2万元/月
Python3-5年本科SQLLinux多进程分布式技术虚拟机技术算法基础多线程软件工程师
西安 雁塔区
python数据处理与分析
1.2-1.4万元/月
Python1-3年本科PandasNumpy量化交易开发经验
西安 雁塔区
Python开发工程师
1.1-1.4万元/月
Python3-5年本科
西安 雁塔区
人工智能应用开发工程师
1.8-2.8万元/月
Python5-10年硕士
西安 雁塔区
Python软件开发工程师
1-1.5万元/月
Python3-5年本科
西安 雁塔区
python开发工程师
1.3-2.6万元/月
Python1-3年本科
西安 雁塔区
python数据采集工程师
8000-16000元/月
Python5-10年大专反爬虫数据清洗数据采集机票
西安 雁塔区
Python或Java大模型技术支撑
1-1.6万元/月
Python3-5年大专PyTorch
西安 雁塔区