西安
职位详情
岗位职责：
1.对目标网站实施网页抓取、数据提取及反爬机制破解；
2.负责多平台数据抽取、清洗、入库及服务化相关的研发与性能优化；
3.参与分布式网络爬虫系统的开发与架构设计，完成信息采集与分析任务；
4.研究并优化爬虫算法，提升系统稳定性与可扩展能力；
5.独立应对开发过程中各类数据需求及接口技术问题。
任职要求：
1.本科及以上学历，计算机相关专业，具备3年以上相关领域工作经验；
2.深入掌握网页抓取原理与技术，熟练运用正则表达式，能高效提取结构化与非结构化数据；
3.精通JAVA/PYTHON编程语言，了解数据库性能调优及常用缓存技术与策略；
4.熟练使用一种主流开源爬虫框架，具备反爬虫对抗、验证码识别经验者优先；
5.熟悉互联网常见技术方案与通用解决思路，有源码级理解或开源项目贡献经历者优先；
6.具备出色的逻辑思维能力，热衷于攻克复杂问题，擅长问题分析与落地解决；
7.掌握APP脱壳、逆向反编译、JS解密等逆向技术者优先考虑。
加分项：
1）具备App端数据采集实战经验
2）有Airflow、DolphinScheduler或xxl-job等开源调度平台部署经验
3）具备浏览器插件方式采集数据的项目经历
1.对目标网站实施网页抓取、数据提取及反爬机制破解；
2.负责多平台数据抽取、清洗、入库及服务化相关的研发与性能优化；
3.参与分布式网络爬虫系统的开发与架构设计，完成信息采集与分析任务；
4.研究并优化爬虫算法，提升系统稳定性与可扩展能力；
5.独立应对开发过程中各类数据需求及接口技术问题。
任职要求：
1.本科及以上学历，计算机相关专业，具备3年以上相关领域工作经验；
2.深入掌握网页抓取原理与技术，熟练运用正则表达式，能高效提取结构化与非结构化数据；
3.精通JAVA/PYTHON编程语言，了解数据库性能调优及常用缓存技术与策略；
4.熟练使用一种主流开源爬虫框架，具备反爬虫对抗、验证码识别经验者优先；
5.熟悉互联网常见技术方案与通用解决思路，有源码级理解或开源项目贡献经历者优先；
6.具备出色的逻辑思维能力，热衷于攻克复杂问题，擅长问题分析与落地解决；
7.掌握APP脱壳、逆向反编译、JS解密等逆向技术者优先考虑。
加分项：
1）具备App端数据采集实战经验
2）有Airflow、DolphinScheduler或xxl-job等开源调度平台部署经验
3）具备浏览器插件方式采集数据的项目经历
2026-07-27 12:53
IP属地：陕西西安
职位福利
本科3-5年Nginx分布式经验MySQLMongoDBPyth
西安易行慧通旅游发展有限公司
未融资 · 20-99人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
python后端开发工程师
1.6-3万元/月
Python1年以下本科GolangC++分布式经验ElasticsearchMySQL备份容灾开发KafkaRedis云计算经验架构设计经验Kubernetes
西安
先生 · 腾讯5日内活跃
收藏职位
