杭州·上城区
职位详情
数据开发/分析工程师、爬虫工程师
职位描述
1. 负责构建数据采集系统，设计并实现网络爬虫架构及相关采集功能；
2. 以系统化架构视角，保障数据抓取体系的可扩展性与运行稳定性；
3. 制定爬虫技术发展路径，并推动各阶段方案落地执行；
4. 支持业务产品所需数据的获取与整合，完成数据沉淀工作；
5. 具备工程建筑领域或互联网行业经验，承担业务数据支撑任务，开展业务数据分析，具备将数据能力产品化的意识，借助产品手段提升数据使用效能；
6. 基于用户行为数据分析，挖掘C端产品使用特征，构建客户全周期管理模型，输出营销优化建议，助力客户转化与活跃度提升；
7. 主导多维数据集市的架构规划与实施，完成业务报表的需求梳理、方案设计及上线支持，为运营和管理层提供数据决策依据；
8. 开展数据建模工作，深入理解业务场景与用户需求，将实际问题转化为数据建模任务，并通过算法手段有效解决；
9. 具备用户偏好推荐系统的实践经验。
任职要求：
1. 精通Java或Python语言，拥有扎实的数据采集项目开发背景；
2. 掌握IO操作、多线程编程、集合框架，了解TCP/IP、HTTP、HTTPS等网络通信协议，熟悉JavaScript、CSS前端技术；
3. 了解主流分布式系统原理与设计模式，掌握缓存、消息队列、分布式协调机制，熟练使用Kafka、Spark、Redis等组件；能合理运用分布式技术解决实际问题；熟悉Linux环境及常用数据库（如MongoDB、MySQL）操作；
4. 了解各类反爬策略及其应对方案；
5. 在爬虫开发与数据分析方面有突出能力，有舆情监测系统或大规模数据抓取项目经验者优先；
6. 可独立完成数据调研、清洗、分析及开发全流程工作。
7. 加分项：探索机器学习方法在不同业务中的落地应用，具备自主设计创新算法的能力。
职位描述
1. 负责构建数据采集系统，设计并实现网络爬虫架构及相关采集功能；
2. 以系统化架构视角，保障数据抓取体系的可扩展性与运行稳定性；
3. 制定爬虫技术发展路径，并推动各阶段方案落地执行；
4. 支持业务产品所需数据的获取与整合，完成数据沉淀工作；
5. 具备工程建筑领域或互联网行业经验，承担业务数据支撑任务，开展业务数据分析，具备将数据能力产品化的意识，借助产品手段提升数据使用效能；
6. 基于用户行为数据分析，挖掘C端产品使用特征，构建客户全周期管理模型，输出营销优化建议，助力客户转化与活跃度提升；
7. 主导多维数据集市的架构规划与实施，完成业务报表的需求梳理、方案设计及上线支持，为运营和管理层提供数据决策依据；
8. 开展数据建模工作，深入理解业务场景与用户需求，将实际问题转化为数据建模任务，并通过算法手段有效解决；
9. 具备用户偏好推荐系统的实践经验。
任职要求：
1. 精通Java或Python语言，拥有扎实的数据采集项目开发背景；
2. 掌握IO操作、多线程编程、集合框架，了解TCP/IP、HTTP、HTTPS等网络通信协议，熟悉JavaScript、CSS前端技术；
3. 了解主流分布式系统原理与设计模式，掌握缓存、消息队列、分布式协调机制，熟练使用Kafka、Spark、Redis等组件；能合理运用分布式技术解决实际问题；熟悉Linux环境及常用数据库（如MongoDB、MySQL）操作；
4. 了解各类反爬策略及其应对方案；
5. 在爬虫开发与数据分析方面有突出能力，有舆情监测系统或大规模数据抓取项目经验者优先；
6. 可独立完成数据调研、清洗、分析及开发全流程工作。
7. 加分项：探索机器学习方法在不同业务中的落地应用，具备自主设计创新算法的能力。
2026-05-12 12:34
IP属地：浙江杭州
职位福利
硕士3-5年要求数据开发经验ETL开发经验数据建模经验KafkaMySQL/SQL Server非外包类数据平台开发经验FlinkElasticsearch其他数据开发经验Spark数据仓库
中弘科建设计有限公司
100-499人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
数据库开发工程师-杭州
1.6-1.9万元/月
数据开发3-5年本科Hive要求数据开发经验证券数据建模经验Kafka实时数仓开发经验数据平台开发经验数据仓库开发经验OracleFlink金融SQL
杭州 上城区
赵女士 · 衡泰技术5日内活跃
数据开发
1.5-1.6万元/月
数据开发5-10年本科监管报送经验Hiveeast要求数据开发经验ETL开发经验Spark数据仓库开发经验金融行业经验SQL
杭州 上城区
吴先生 · 信雅达科技股份5日内活跃
大数据开发工程师（数据仓库）
1.7-2.5万元/月
数据开发5-10年本科非外包类要求数据开发经验实时数仓开发经验数据治理经验数据建模经验数据仓库开发经验JavaPythonSQLScalaFlinkKafkaClickhouseDoris/DruidFlink原理/源码Kafka原理/源码Clickhouse原理/源码MySQL原理/源码PostgreSQL原理/源码Oracle原理/源码
杭州 上城区
汪女士 · 杭州但丁云科技有限公司5日内活跃
数据开发工程师
1.8-2.5万元/月
数据开发3-5年硕士要求数据开发经验ETL开发经验数据建模经验KafkaMySQL/SQL Server非外包类数据平台开发经验FlinkElasticsearch其他数据开发经验Spark数据仓库
杭州 上城区
赵女士 · 中弘科建5日内活跃
数据库开发工程师-杭州
1.4-1.9万元/月
数据开发5-10年本科要求数据开发经验证券数据平台开发经验ImpalaFlink金融行业经验Easydata数据库内核开发经验HiveMySQL原理/源码Spark数据仓库开发经验Python
杭州 上城区
徐先生 · 衡泰技术5日内活跃
高级数据工程师（工作地宁波）
1.8-3万元/月
数据开发10年以上本科Hive要求数据开发经验ETL开发经验MySQL/SQL Server实时数仓开发经验Spark计算机相关专业数据仓库开发经验数据平台开发经验Impala金融行业经验SQL
杭州 上城区
谷女士 · 中科聚信5日内活跃
收藏职位
