职位详情
中级高级 中级Java Flink
高级 AI方向大数据
岗位职责
1. 运用Java技术体系开展大数据实时计算系统的设计、开发、测试及部署工作,重点承担基于Flink的实时数据处理流程构建与性能优化;
2. 负责Kafka集群的日常维护,包括Topic规划、分区策略调整、消息积压治理及吞吐能力优化,确保消息传递的高可用性与可靠性;
3. 参与需求分析与评审,将业务场景转化为可行的技术方案,利用Flink实现数据清洗、聚合、关联匹配及CEP复杂事件识别等关键逻辑;
4. 持续优化Flink任务的资源配置、并行度设置、状态后端选型以及checkpoint/savepoint机制,解决数据延迟、一致性保障和作业故障恢复等问题;
5. 协同上下游系统对接,设计基于Kafka的消息通信架构,支持多种数据源(MySQL/Redis/日志)与目标存储(HDFS/HBase/Doris)间的数据集成与流转
任职要求
1. 计算机相关专业背景,具备3年以上Java后端开发经验,1年以上实际参与Flink+Kafka大数据实时计算项目经历;
2. 熟练掌握Java语言基础、集合框架、多线程编程及IO/NIO模型,熟悉SpringBoot、SpringCloud等主流微服务架构,具备扎实的编码能力;
3. 深入理解Flink核心原理,熟练使用DataStream API与Table API,掌握状态管理、窗口机制、CEP规则引擎、数据分流合流等关键技术,可独立完成作业开发与调优;
4. 深入掌握Kafka运行机制,熟悉生产者消费者模型、分区分配策略、副本同步机制、幂等性与事务消息特性,具备独立排查集群问题与性能瓶颈的能力;
5. 熟悉大数据生态常用组件(Hadoop/Hive/Doris/Redis等),了解数据同步工具如Canal、MaxWell,具备端到端数据链路设计经验;
6. 具备较强的线上问题定位能力,能快速响应并处理Flink任务异常、Kafka消息堆积或丢失、数据不一致等典型问题;
7. 有BES/华为MRS等信创环境组件使用经验者优先
招聘数量
2
高级 AI方向大数据
岗位职责
1. 运用Java技术体系开展大数据实时计算系统的设计、开发、测试及部署工作,重点承担基于Flink的实时数据处理流程构建与性能优化;
2. 负责Kafka集群的日常维护,包括Topic规划、分区策略调整、消息积压治理及吞吐能力优化,确保消息传递的高可用性与可靠性;
3. 参与需求分析与评审,将业务场景转化为可行的技术方案,利用Flink实现数据清洗、聚合、关联匹配及CEP复杂事件识别等关键逻辑;
4. 持续优化Flink任务的资源配置、并行度设置、状态后端选型以及checkpoint/savepoint机制,解决数据延迟、一致性保障和作业故障恢复等问题;
5. 协同上下游系统对接,设计基于Kafka的消息通信架构,支持多种数据源(MySQL/Redis/日志)与目标存储(HDFS/HBase/Doris)间的数据集成与流转
任职要求
1. 计算机相关专业背景,具备3年以上Java后端开发经验,1年以上实际参与Flink+Kafka大数据实时计算项目经历;
2. 熟练掌握Java语言基础、集合框架、多线程编程及IO/NIO模型,熟悉SpringBoot、SpringCloud等主流微服务架构,具备扎实的编码能力;
3. 深入理解Flink核心原理,熟练使用DataStream API与Table API,掌握状态管理、窗口机制、CEP规则引擎、数据分流合流等关键技术,可独立完成作业开发与调优;
4. 深入掌握Kafka运行机制,熟悉生产者消费者模型、分区分配策略、副本同步机制、幂等性与事务消息特性,具备独立排查集群问题与性能瓶颈的能力;
5. 熟悉大数据生态常用组件(Hadoop/Hive/Doris/Redis等),了解数据同步工具如Canal、MaxWell,具备端到端数据链路设计经验;
6. 具备较强的线上问题定位能力,能快速响应并处理Flink任务异常、Kafka消息堆积或丢失、数据不一致等典型问题;
7. 有BES/华为MRS等信创环境组件使用经验者优先
招聘数量
2
2026-05-28 14:02
IP属地:上海
职位福利
本科3-5年Java要求数据开发经验Kafkaai数据仓库开发经验Flink金融行业经验GaussDBSQL

上海汉朔信息科技有限公司
未融资 · 1000-9999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
数据开发工程师
1-1.4万元/月
数据开发5-10年大专要求数据开发经验数据建模经验ClickhouseKafkaBI报表开发经验实时数仓开发经验Spark数据仓库开发经验OracleFlinkSQL
上海 浦东新区

艾女士 · 上海弘雅5日内活跃
BI开发工程师
1.5-2.5万元/月
数据开发3-5年本科Java要求数据开发经验大数据引擎开发经验MySQL/SQL ServerBI报表开发经验非外包类其他数据平台开发经验金融行业经验Python
上海 浦东新区

贾先生 · 宇创时代5日内活跃
数据开发工程师-fsh
1.3-1.9万元/月
数据开发3-5年本科Java要求数据开发经验ETL开发经验Kafka实时数仓开发经验ImpalaFlink金融行业经验HiveBI报表开发经验数据仓库开发经验OraclePython
上海 浦东新区

吕女士 · 云象5日内活跃
数据开发
1.5-1.8万元/月
数据开发5-10年本科要求数据开发经验ETL开发经验证券MySQL/SQL Server非外包类数据平台开发经验金融行业经验SQLHive债权业务数据仓库开发经验OraclePython
上海 浦东新区

唐先生 · 睿服科技5日内活跃
数据开发
1.4-1.7万元/月
数据开发3-5年本科要求数据开发经验其他离线金融行业经验数据中台建设SQLHBaseShell指标体系设计图谱数据仓库开发经验OraclePython
上海 浦东新区

唐先生 · 睿服科技5日内活跃






