搜索
登录注册

职位详情

岗位职责:
1、负责大数据应用开发平台湖仓一体化架构的升级、开发与优化运维,构建具备高可用性与高扩展性的数据采集、存储与计算体系,满足海量数据实时及离线处理需求;
2、主导数据模型的设计与持续优化,基于Flink实现ETL/ELT数据管道的开发与迭代,结合Paimon完成数据清洗、转换与加载的全流程处理,依托Doris支撑高效查询分析;提升架构性能,攻克高并发写入、跨引擎查询优化、数据分层设计、数据一致性等关键技术难题;参与数据治理体系搭建,协助制定数据标准、质量监控机制与安全管控策略,确保数据准确性和一致性;
3、持续关注Paimon、Flink、Doris等技术方向的前沿进展,评估并引入适用的新技术工具,推动平台架构的演进与升级;协同产品、数据分析、运维等相关团队紧密配合,促进数据在业务场景中的落地与价值释放;
4、协助推进各类研发项目的实施与验收工作。

任职要求:
1、熟悉大数据技术生态,掌握Flink计算引擎,精通Paimon\Iceberg\Hudi\Delta Lake等湖仓存储技术及Doris OLAP分析工具,深入理解流批一体架构的核心原理及其实际应用;熟练使用Java、Python、Scala编程语言,掌握SQL,了解Linux系统及Shell脚本编写;
2、具备数据建模、ETL开发与数据治理实践经验,能独立应对流批一体架构中的各类技术挑战;了解存算分离架构,具备云原生(K8s)相关技术经验者优先,具备良好的沟通协作能力与自主学习意识;
3、统招本科及以上学历,拥有5年及以上湖仓一体领域开发工作经验;
2026-06-22 13:25
IP属地:湖南长沙

职位福利

本科5-10年湖仓一体、数据湖、实时计算
企业发布信息图
万达信息股份有限公司
已上市 · 1000-9999人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

大数据开发工程师(长沙)
2.3-2.5万元/月
数据开发5-10年本科湖仓一体、数据湖、实时计算
长沙 芙蓉区
TM数据架构师
1.2-2万元/月
数据开发5-10年本科Java高校项目要求数据开发经验PostgreSQL数据平台开发经验Flink数据治理经验Python
长沙 岳麓区
大数据开发工程师
1.5-2.5万元/月
数据开发1-3年本科要求数据开发经验数据建模经验Kafka非外包类计算机相关专业Spark数据平台开发经验Flink数学/统计相关专业PythonSQL
长沙
大数据研发工程师
1.5-2.5万元/月
数据开发1-3年本科要求数据开发经验数据建模经验Kafka非外包类计算机相关专业Spark数据平台开发经验Flink数学/统计相关专业PythonSQL
长沙 开福区
高级Python数据采集工程师
1.5-2.5万元/月
数据开发3-5年本科爬虫redis
长沙 开福区
TM数据架构师
1.2-2万元/月
数据开发5-10年本科Java高校项目要求数据开发经验PostgreSQL数据平台开发经验Flink数据治理经验Python
长沙
Python数据开发工程师
1.2-2.4万元/月
数据开发1-3年本科接受无数据开发经验HadoopKafkaSparkSQL
长沙 开福区
数据开发工程师(银行现场)
1-1.3万元/月
数据开发3-5年本科Hive要求数据开发经验ETL开发经验数据建模经验实时数仓开发经验Spark计算机相关专业数据平台开发经验数据仓库开发经验数据治理经验SQL
长沙 岳麓区
数据开发工程师
1.2-2.4万元/月
数据开发经验不限本科接受无数据开发经验
长沙 开福区