职位详情
岗位职责
1. 运用Java技术体系开展大数据实时计算系统的设计、开发、测试及上线工作,重点承担基于Flink的实时数据处理流程构建与性能优化;
2. 负责Kafka集群的日常维护,包括topic设计、分区策略调整、消息堆积治理以及吞吐能力提升,确保消息传递的高可用性与高可靠性;
3. 参与需求分析与评审,将业务场景转化为可落地的技术架构,利用Flink实现数据清洗、聚合运算、表关联及CEP复杂事件识别等核心逻辑;
4. 持续优化Flink任务的资源配置、并行度设置、状态后端选型及checkpoint/savepoint机制,应对数据延迟、一致性保障和作业故障恢复等挑战;
5. 与上下游系统协同,设计基于Kafka的数据交互方案,支持多种数据源(MySQL/Redis/日志)与目标存储(HDFS/HBase/Doris)之间的高效流转;
任职要求
1. 计算机类相关专业背景,具备3年以上Java后端开发经历,1年以上在Flink+Kafka环境下完成大数据实时处理项目的真实经验;
2. 熟练掌握Java语言基础、集合框架、多线程编程及IO/NIO模型,了解SpringBoot、SpringCloud等微服务技术栈,具有扎实的服务端开发能力;
3. 深入理解Flink底层机制与实际应用,熟练使用DataStream和Table API,掌握状态管理、窗口操作、CEP规则匹配、流合并与拆分等功能,能独立完成作业开发与调优;
4. 深刻掌握Kafka运行原理,熟悉生产者消费者模型、分区分配策略、副本同步机制、幂等与事务消息特性,具备独立排查集群异常和性能瓶颈的能力;
5. 熟悉大数据平台常用组件(如Hadoop/Hive/Doris/Redis),了解主流数据同步工具(如Canal/MaxWell),具备完整的数据链路规划与实施经验;
6. 具备较强的线上问题定位能力,能够快速响应并解决Flink任务异常、Kafka消息积压或丢失、数据不一致等生产问题;
7. 有使用BES、华为MRS等信创生态组件经验者优先考虑。
1. 运用Java技术体系开展大数据实时计算系统的设计、开发、测试及上线工作,重点承担基于Flink的实时数据处理流程构建与性能优化;
2. 负责Kafka集群的日常维护,包括topic设计、分区策略调整、消息堆积治理以及吞吐能力提升,确保消息传递的高可用性与高可靠性;
3. 参与需求分析与评审,将业务场景转化为可落地的技术架构,利用Flink实现数据清洗、聚合运算、表关联及CEP复杂事件识别等核心逻辑;
4. 持续优化Flink任务的资源配置、并行度设置、状态后端选型及checkpoint/savepoint机制,应对数据延迟、一致性保障和作业故障恢复等挑战;
5. 与上下游系统协同,设计基于Kafka的数据交互方案,支持多种数据源(MySQL/Redis/日志)与目标存储(HDFS/HBase/Doris)之间的高效流转;
任职要求
1. 计算机类相关专业背景,具备3年以上Java后端开发经历,1年以上在Flink+Kafka环境下完成大数据实时处理项目的真实经验;
2. 熟练掌握Java语言基础、集合框架、多线程编程及IO/NIO模型,了解SpringBoot、SpringCloud等微服务技术栈,具有扎实的服务端开发能力;
3. 深入理解Flink底层机制与实际应用,熟练使用DataStream和Table API,掌握状态管理、窗口操作、CEP规则匹配、流合并与拆分等功能,能独立完成作业开发与调优;
4. 深刻掌握Kafka运行原理,熟悉生产者消费者模型、分区分配策略、副本同步机制、幂等与事务消息特性,具备独立排查集群异常和性能瓶颈的能力;
5. 熟悉大数据平台常用组件(如Hadoop/Hive/Doris/Redis),了解主流数据同步工具(如Canal/MaxWell),具备完整的数据链路规划与实施经验;
6. 具备较强的线上问题定位能力,能够快速响应并解决Flink任务异常、Kafka消息积压或丢失、数据不一致等生产问题;
7. 有使用BES、华为MRS等信创生态组件经验者优先考虑。
2026-07-02 13:29
IP属地:上海
职位福利
本科3-5年JavaMySQLKafkaSpring

深圳市睿服科技有限公司
不需要融资 · 1000-9999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
Java
1.2-1.3万元/月
Java3-5年大专保险分布式经验微服务经验接受无前端经验/技能SpringSpringCloudMySQLRedisOracle
上海 浦东新区

蒋女士 · 博奥特昨日活跃
Java后端开发
2-3万元/月
兼职Java3-5年本科接受居家办公架构设计经验分布式经验微服务经验云计算经验大数据经验接受无前端经验/技能SpringSpringCloudMyBatisDubboTomcatMySQLRedisOracleMongoDB
上海 浦东新区 唐镇

刘女士 · 上海战翱科技有限公司昨日活跃
外派中泰证券Java-具备理财项目经验-现
1.8-1.9万元/月
Java5-10年本科SpringCloud架构设计经验Oracle统招本科现场面试有银行项目经验
上海 浦东新区
中高级Java软件开发工程师
1-1.2万元/月
Java3-5年本科不接受居家办公Web端分布式经验Linux保险MySQL服务器配置计算机软件RedisSpringOracle
上海 浦东新区







