职位详情
数据工程师(数据湖方向)
岗位职责:
负责大数据平台中数据湖的日常维护、监控及异常处理,确保系统稳定运行;
设计并实现数据湖的ETL流程,优化PB级数据的存储与计算效率;
管理数据湖的元数据信息、访问权限及数据生命周期,保障数据安全与合规性;
持续提升数据平台性能,涵盖资源分配、存储成本优化及查询响应速度;
配合相关团队,提供高效、稳定的数据接入与计算支持服务。
任职要求:
本科及以上学历,计算机或相关专业背景;
掌握Hadoop/Spark/Hive/Flink等大数据组件,理解数据湖架构及相关技术体系;
精通SQL与Python,具备ETL开发经验及性能调优能力;
熟悉Linux操作系统、分布式存储(HDFS/S3)及容器技术(Docker/K8s);
具备较强的故障排查能力,工作认真负责,具有良好的沟通协作精神。
岗位职责:
负责大数据平台中数据湖的日常维护、监控及异常处理,确保系统稳定运行;
设计并实现数据湖的ETL流程,优化PB级数据的存储与计算效率;
管理数据湖的元数据信息、访问权限及数据生命周期,保障数据安全与合规性;
持续提升数据平台性能,涵盖资源分配、存储成本优化及查询响应速度;
配合相关团队,提供高效、稳定的数据接入与计算支持服务。
任职要求:
本科及以上学历,计算机或相关专业背景;
掌握Hadoop/Spark/Hive/Flink等大数据组件,理解数据湖架构及相关技术体系;
精通SQL与Python,具备ETL开发经验及性能调优能力;
熟悉Linux操作系统、分布式存储(HDFS/S3)及容器技术(Docker/K8s);
具备较强的故障排查能力,工作认真负责,具有良好的沟通协作精神。
2026-08-20 13:35
IP属地:四川成都
职位福利
本科3-5年JavaHive要求数据开发经验ETL开发经验BI报表开发经验实时数仓开发经验Spark数据平台开发经验数据仓库开发经验Python

中科软科技股份有限公司
已上市 · 10000人以上

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
1.1-1.5万元/月
数据开发3-5年本科PostgreSQL原理/源码Java要求数据开发经验Spark原理/源码ScalaFlink原理/源码大数据引擎开发经验数据建模经验MySQL/SQL Server实时数仓开发经验
成都 武侯区
1.3-1.5万元/月
数据开发3-5年本科要求数据开发经验银行Scala大数据引擎开发经验Flink原理/源码其他数据开发经验实时数仓开发经验其他金融行业经验大数据
成都 武侯区
1.2-1.3万元/月
数据开发Hadoop3-5年大专外包类要求数据开发经验数据治理经验数据建模经验数据平台开发经验PythonSQLScalaSparkHiveFlinkHBaseKafkaSpark原理/源码Flink原理/源码Hive原理/源码HBase原理/源码Kafka原理/源码MySQL原理/源码PostgreSQL原理/源码Oracle原理/源码
成都 武侯区








