职位详情
岗位职责
1. 运用Java技术体系开展大数据实时计算系统的设计、开发、测试及上线工作,重点承担基于Flink的实时数据处理流程构建与性能优化;
2. 负责Kafka集群的日常维护,包括topic设计、分区策略调整、消息堆积治理以及吞吐能力提升,确保消息传递的高可用性与高可靠性;
3. 参与需求分析与评审,将业务场景转化为可落地的技术架构,利用Flink实现数据清洗、聚合运算、表关联及CEP复杂事件识别等核心逻辑;
4. 持续优化Flink任务的资源配置、并行度设置、状态后端选型及checkpoint/savepoint机制,应对数据延迟、一致性保障和作业故障恢复等挑战;
5. 与上下游系统协同,设计基于Kafka的数据交互方案,支持多种数据源(MySQL/Redis/日志)与目标存储(HDFS/HBase/Doris)之间的高效流转;
任职要求
1. 计算机类相关专业背景,具备3年以上Java后端开发经历,1年以上在Flink+Kafka环境下完成大数据实时处理项目的真实经验;
2. 熟练掌握Java语言基础、集合框架、多线程编程及IO/NIO模型,了解SpringBoot、SpringCloud等微服务技术栈,具有扎实的服务端开发能力;
3. 深入理解Flink底层机制与实际应用,熟练使用DataStream和Table API,掌握状态管理、窗口操作、CEP规则匹配、流合并与拆分等功能,能独立完成作业开发与调优;
4. 深刻掌握Kafka运行原理,熟悉生产者消费者模型、分区分配策略、副本同步机制、幂等与事务消息特性,具备独立排查集群异常和性能瓶颈的能力;
5. 熟悉大数据平台常用组件(如Hadoop/Hive/Doris/Redis),了解主流数据同步工具(如Canal/MaxWell),具备完整的数据链路规划与实施经验;
6. 具备较强的线上问题定位能力,能够快速响应并解决Flink任务异常、Kafka消息积压或丢失、数据不一致等生产问题;
7. 有使用BES、华为MRS等信创生态组件经验者优先考虑。
1. 运用Java技术体系开展大数据实时计算系统的设计、开发、测试及上线工作,重点承担基于Flink的实时数据处理流程构建与性能优化;
2. 负责Kafka集群的日常维护,包括topic设计、分区策略调整、消息堆积治理以及吞吐能力提升,确保消息传递的高可用性与高可靠性;
3. 参与需求分析与评审,将业务场景转化为可落地的技术架构,利用Flink实现数据清洗、聚合运算、表关联及CEP复杂事件识别等核心逻辑;
4. 持续优化Flink任务的资源配置、并行度设置、状态后端选型及checkpoint/savepoint机制,应对数据延迟、一致性保障和作业故障恢复等挑战;
5. 与上下游系统协同,设计基于Kafka的数据交互方案,支持多种数据源(MySQL/Redis/日志)与目标存储(HDFS/HBase/Doris)之间的高效流转;
任职要求
1. 计算机类相关专业背景,具备3年以上Java后端开发经历,1年以上在Flink+Kafka环境下完成大数据实时处理项目的真实经验;
2. 熟练掌握Java语言基础、集合框架、多线程编程及IO/NIO模型,了解SpringBoot、SpringCloud等微服务技术栈,具有扎实的服务端开发能力;
3. 深入理解Flink底层机制与实际应用,熟练使用DataStream和Table API,掌握状态管理、窗口操作、CEP规则匹配、流合并与拆分等功能,能独立完成作业开发与调优;
4. 深刻掌握Kafka运行原理,熟悉生产者消费者模型、分区分配策略、副本同步机制、幂等与事务消息特性,具备独立排查集群异常和性能瓶颈的能力;
5. 熟悉大数据平台常用组件(如Hadoop/Hive/Doris/Redis),了解主流数据同步工具(如Canal/MaxWell),具备完整的数据链路规划与实施经验;
6. 具备较强的线上问题定位能力,能够快速响应并解决Flink任务异常、Kafka消息积压或丢失、数据不一致等生产问题;
7. 有使用BES、华为MRS等信创生态组件经验者优先考虑。
2026-08-16 13:58
IP属地:上海
职位福利
本科3-5年JavaMySQLKafkaSpring

深圳市睿服科技有限公司
不需要融资 · 1000-9999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
java开发(线上一面现场二面)
1.2-1.6万元/月
Java3-5年大专不接受居家办公分布式经验微服务经验接受无前端经验/技能SpringSpringCloudMyBatisMySQLRedis
上海 浦东新区










