搜索
登录注册

职位详情

中级高级 中级Java Flink
高级 AI方向大数据

岗位职责
1. 运用Java技术体系开展大数据实时计算系统的设计、开发、测试及部署工作,重点承担基于Flink的实时数据处理流程构建与性能优化;
2. 负责Kafka集群的日常维护,包括Topic规划、分区策略调整、消息积压治理及吞吐能力优化,确保消息传递的高可用性与可靠性;
3. 参与需求分析与评审,将业务场景转化为可行的技术方案,利用Flink实现数据清洗、聚合、关联匹配及CEP复杂事件识别等关键逻辑;
4. 持续优化Flink任务的资源配置、并行度设置、状态后端选型以及checkpoint/savepoint机制,解决数据延迟、一致性保障和作业故障恢复等问题;
5. 协同上下游系统对接,设计基于Kafka的消息通信架构,支持多种数据源(MySQL/Redis/日志)与目标存储(HDFS/HBase/Doris)间的数据集成与流转

任职要求
1. 计算机相关专业背景,具备3年以上Java后端开发经验,1年以上实际参与Flink+Kafka大数据实时计算项目经历;
2. 熟练掌握Java语言基础、集合框架、多线程编程及IO/NIO模型,熟悉SpringBoot、SpringCloud等主流微服务架构,具备扎实的编码能力;
3. 深入理解Flink核心原理,熟练使用DataStream API与Table API,掌握状态管理、窗口机制、CEP规则引擎、数据分流合流等关键技术,可独立完成作业开发与调优;
4. 深入掌握Kafka运行机制,熟悉生产者消费者模型、分区分配策略、副本同步机制、幂等性与事务消息特性,具备独立排查集群问题与性能瓶颈的能力;
5. 熟悉大数据生态常用组件(Hadoop/Hive/Doris/Redis等),了解数据同步工具如Canal、MaxWell,具备端到端数据链路设计经验;
6. 具备较强的线上问题定位能力,能快速响应并处理Flink任务异常、Kafka消息堆积或丢失、数据不一致等典型问题;
7. 有BES/华为MRS等信创环境组件使用经验者优先

招聘数量
2
2026-05-28 14:02
IP属地:上海

职位福利

本科3-5年Java要求数据开发经验Kafkaai数据仓库开发经验Flink金融行业经验GaussDBSQL
企业发布信息图
上海汉朔信息科技有限公司
未融资 · 1000-9999人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

大数据开发
1.5-1.6万元/月
数据开发5-10年本科能源要求数据开发经验化工业财一体化BI报表开发经验Spark数据平台开发经验SQL
上海 浦东新区
数据开发工程师
1-1.4万元/月
数据开发5-10年大专要求数据开发经验数据建模经验ClickhouseKafkaBI报表开发经验实时数仓开发经验Spark数据仓库开发经验OracleFlinkSQL
上海 浦东新区
BI开发工程师
1.5-2.5万元/月
数据开发3-5年本科Java要求数据开发经验大数据引擎开发经验MySQL/SQL ServerBI报表开发经验非外包类其他数据平台开发经验金融行业经验Python
上海 浦东新区
数据开发工程师-fsh
1.3-1.9万元/月
数据开发3-5年本科Java要求数据开发经验ETL开发经验Kafka实时数仓开发经验ImpalaFlink金融行业经验HiveBI报表开发经验数据仓库开发经验OraclePython
上海 浦东新区
吕女士 · 云象5日内活跃
数据开发
1.5-1.8万元/月
数据开发5-10年本科要求数据开发经验ETL开发经验证券MySQL/SQL Server非外包类数据平台开发经验金融行业经验SQLHive债权业务数据仓库开发经验OraclePython
上海 浦东新区
大数据开发
1.4-1.6万元/月
数据开发5-10年本科Java要求数据开发经验Hive原理/源码大数据引擎开发经验实时数仓开发经验数据治理经验SQL
上海 浦东新区
中级量化开发工程师
5-6.5万元/月
数据开发3-5年本科要求数据开发经验其他数据开发经验非外包类其他PythonSQL
上海 浦东新区
数据开发
1.4-1.7万元/月
数据开发3-5年本科要求数据开发经验其他离线金融行业经验数据中台建设SQLHBaseShell指标体系设计图谱数据仓库开发经验OraclePython
上海 浦东新区
数据开发
9000-12000元/月
数据开发3-5年本科Hive要求数据开发经验ETL开发经验数据平台开发经验
上海 浦东新区