青浦区
职位详情
职位描述
主要职责
平台架构与开发
负责大数据平台核心功能模块的架构设计、编码实现及持续迭代升级
基于ClickHouse/Doris等OLAP引擎搭建高性能实时数据仓库体系
设计并落地高吞吐、低延迟的数据流转通道
开发并维护统一数据服务接口，满足各类业务系统的数据调用需求
数据处理与优化
构建实时与准实时数据处理体系，适配多样化复杂业务场景
持续优化大数据相关组件性能，涵盖查询效率、存储结构及计算资源利用
设计大对象（BLOB/CLOB）数据的高效存取与网络传输机制
确保数据处理过程准确可靠，建立完善的数据质量检测与预警机制
技术架构与演进
参与制定大数据平台整体技术路线与架构演进策略
调研并引入先进的大数据技术工具，增强平台处理能力
制定数据处理流程规范与技术实施标准
设计具备高可用性与弹性扩展能力的系统架构，匹配业务规模快速扩张需求
跨团队协作
与产品及业务部门密切配合，将实际业务诉求转化为可行的技术解决方案
带领初级技术人员成长，提升团队整体研发能力
参与关键技术选型讨论，推动先进技术实践在项目中落地应用
任职要求
必备技能
技术栈
扎实掌握Java语言，具备5年以上真实项目开发经历
熟练运用Spring Boot/Spring Cloud微服务技术栈
具有ClickHouse或Doris的深入使用经验，包含：
集群部署与日常运维管理
性能调优与SQL查询加速
数据模型设计与分区策略制定
熟练使用Kafka，具备大规模消息队列处理实战经验
熟悉Linux操作系统及常用操作命令
具备大文件（图片、视频、文档等）存储与传输的实际项目经验
了解主流分布式存储系统（如HDFS、S3、OSS等）
拥有TB至PB级别数据量的处理实践经验
掌握数据仓库建模方法论及ETL流程开发
主导过完整大数据平台从零到一的建设过程
能够独立完成复杂数据处理系统的设计与实现
熟悉Flink/Spark/Hive等大数据生态常用组件
具备高并发、高可用系统的设计与实施经验
理解微服务架构原理及服务治理机制
加分项
了解MPP数据库架构特点
具备从系统设计到上线部署全流程的实践经验
主要职责
平台架构与开发
负责大数据平台核心功能模块的架构设计、编码实现及持续迭代升级
基于ClickHouse/Doris等OLAP引擎搭建高性能实时数据仓库体系
设计并落地高吞吐、低延迟的数据流转通道
开发并维护统一数据服务接口，满足各类业务系统的数据调用需求
数据处理与优化
构建实时与准实时数据处理体系，适配多样化复杂业务场景
持续优化大数据相关组件性能，涵盖查询效率、存储结构及计算资源利用
设计大对象（BLOB/CLOB）数据的高效存取与网络传输机制
确保数据处理过程准确可靠，建立完善的数据质量检测与预警机制
技术架构与演进
参与制定大数据平台整体技术路线与架构演进策略
调研并引入先进的大数据技术工具，增强平台处理能力
制定数据处理流程规范与技术实施标准
设计具备高可用性与弹性扩展能力的系统架构，匹配业务规模快速扩张需求
跨团队协作
与产品及业务部门密切配合，将实际业务诉求转化为可行的技术解决方案
带领初级技术人员成长，提升团队整体研发能力
参与关键技术选型讨论，推动先进技术实践在项目中落地应用
任职要求
必备技能
技术栈
扎实掌握Java语言，具备5年以上真实项目开发经历
熟练运用Spring Boot/Spring Cloud微服务技术栈
具有ClickHouse或Doris的深入使用经验，包含：
集群部署与日常运维管理
性能调优与SQL查询加速
数据模型设计与分区策略制定
熟练使用Kafka，具备大规模消息队列处理实战经验
熟悉Linux操作系统及常用操作命令
具备大文件（图片、视频、文档等）存储与传输的实际项目经验
了解主流分布式存储系统（如HDFS、S3、OSS等）
拥有TB至PB级别数据量的处理实践经验
掌握数据仓库建模方法论及ETL流程开发
主导过完整大数据平台从零到一的建设过程
能够独立完成复杂数据处理系统的设计与实现
熟悉Flink/Spark/Hive等大数据生态常用组件
具备高并发、高可用系统的设计与实施经验
理解微服务架构原理及服务治理机制
加分项
了解MPP数据库架构特点
具备从系统设计到上线部署全流程的实践经验
2026-02-24 14:33
IP属地：上海
职位福利
本科及以上3-5年要求数据开发经验Spark原理/源码Hive原理/源码大数据引擎开发经验Flink原理/源码实时数仓开发经验非外包类Python
德科信息有限公司
· 5人以上
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
大数据平台开发（上市企业）
1.4-2万元/月
数据开发5-10年本科及以上JavaHive要求数据开发经验MySQL/SQL ServerClickhouse实时数仓开发经验Spark数据平台开发经验SpringbootFlinkSQL
上海 青浦区
王女士 · 德科信息有限公司昨日活跃
大数据系统开发
1.5-2.5万元/月
数据开发5-10年本科及以上JavaHive要求数据开发经验KafkaClickhouse实时数仓开发经验Spark数据平台开发经验SpringbootFlink
上海 青浦区
秦先生 · 德科信息有限公司昨日活跃
数据开发工程师
1.5-2万元/月
数据开发5-10年本科及以上要求数据开发经验MySQL/SQL Server实时数仓开发经验非外包类Spark数据平台开发经验数据仓库开发经验FlinkSQL
上海 青浦区
陈先生 · 上海德慧昨日活跃
大数据开发组长-年终奖、足额社保
1.9-3万元/月
数据开发10年以上本科及以上Hadoop银行个贷普惠金融外包类要求数据开发经验金融行业经验数据平台开发经验JavaPythonSparkHiveFlinkHBase
上海 浦东新区
戴女士 · 软通动力昨日活跃
数据开发
1.3-1.4万元/月
数据开发10年以上本科及以上Hive要求数据开发经验MySQL/SQL Server计算机相关专业Spark数据仓库开发经验Flink金融行业经验Python
上海 浦东新区
姜女士 · 睿服科技昨日活跃
收藏职位
