南京·雨花台区
职位详情
职责描述：
1、负责海外项目的數據采集工作，持续优化并维护现有爬虫平台，探索并沉淀有效的改进策略与实施方案；
2、依据业务需求开发分布式爬虫程序，针对大量目标站点制定抓取规则，有效应对各类反爬机制；
3、对采集所得数据进行初步的结构化处理与清洗，确保数据可用性；
4、具备一定的机器学习与人工智能技术理解能力，能为系统智能化升级提供可行思路与优化建议；
5、负责爬虫服务节点的运维管理，保障系统长期稳定运行；
6、定期检查已采集数据的质量与来源稳定性，确保各渠道数据持续可靠获取。
任职要求：
1、具备两年以上Python开发经验，沟通顺畅，工作主动，态度严谨，具有良好的自主学习能力；
2、了解主流开发框架，例如Spring、MyBatis等；
3、熟练使用Python语言，可独立完成功能模块的设计与编码实现；
4、深入掌握爬虫核心技术（包括requests/xpath/scrapy/正则表达式/验证码加密解析/代理池构建）；
5、熟悉HTTP通信协议，掌握html/css/js/jquery/ajax等相关前端技术；
6、了解JavaScript加密逻辑，熟悉Python环境中执行JS代码的常用方式，如pyv8；
7、熟练运用常见数据库（如MySQL、Mongodb），掌握基本的DDL/DML操作，了解索引机制及常规SQL性能优化方法。
1、负责海外项目的數據采集工作，持续优化并维护现有爬虫平台，探索并沉淀有效的改进策略与实施方案；
2、依据业务需求开发分布式爬虫程序，针对大量目标站点制定抓取规则，有效应对各类反爬机制；
3、对采集所得数据进行初步的结构化处理与清洗，确保数据可用性；
4、具备一定的机器学习与人工智能技术理解能力，能为系统智能化升级提供可行思路与优化建议；
5、负责爬虫服务节点的运维管理，保障系统长期稳定运行；
6、定期检查已采集数据的质量与来源稳定性，确保各渠道数据持续可靠获取。
任职要求：
1、具备两年以上Python开发经验，沟通顺畅，工作主动，态度严谨，具有良好的自主学习能力；
2、了解主流开发框架，例如Spring、MyBatis等；
3、熟练使用Python语言，可独立完成功能模块的设计与编码实现；
4、深入掌握爬虫核心技术（包括requests/xpath/scrapy/正则表达式/验证码加密解析/代理池构建）；
5、熟悉HTTP通信协议，掌握html/css/js/jquery/ajax等相关前端技术；
6、了解JavaScript加密逻辑，熟悉Python环境中执行JS代码的常用方式，如pyv8；
7、熟练运用常见数据库（如MySQL、Mongodb），掌握基本的DDL/DML操作，了解索引机制及常规SQL性能优化方法。
2026-06-01 12:32
IP属地：江苏南京
职位福利
本科1-3年Python
中电变压器股份有限公司
不需要融资 · 1000-9999人
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
Python开发工程师
9000-14000元/月
Python3-5年本科Elasticsearch微服务经验容器K8SMySQL机器学习经验RedisLinux开发/部署经验懂得PEP8
南京 雨花台区
收藏职位
