搜索
登录注册

职位详情

数据治理开发专家

岗位职责
1、平台设计与开发
-主导元数据管理平台的整体架构设计,承担核心功能模块的编码与系统性能调优工作。
-完成元数据采集、存储管理、血缘关系分析、影响范围识别及数据目录构建等功能实现。
-实现对多种数据源(包括数据库、接口、文件系统等)的元数据自动抓取与实时同步机制。

2、数据治理与标准化
-制定并落地元数据模型设计、分类结构以及统一的标准规范(参考DAMA、DCMM等行业标准)。
-构建数据血缘追踪体系,开发数据质量监测模块和元数据变更审计能力。

3、技术整合与协作
-与数据仓库、大数据处理平台(如Hadoop、Spark)及数据湖组件(如DeltaLake、Iceberg)完成深度对接。
-协同数据安全与质量管理团队,促进元数据在安全管控、质量评估等业务场景中的实际应用。

4、前沿技术探索
-研究基于AI技术的智能元数据处理方案,探索大语言模型在自动分类与标签生成中的实践路径。

任职要求:
1、全日制本科及以上学历,具备6年以上相关领域工作经验;
2、熟练掌握Java/Python/Scala其中至少一门编程语言,熟悉SpringBoot、Django等主流开发框架。
3、深入理解元数据管理关键概念,包括数据血缘、术语体系、数据目录等核心内容。
4、熟练运用关系型数据库(如MySQL、PostgreSQL)及NoSQL数据库(如Elasticsearch、Neo4j),
了解Hive、HDFS、Kafka等大数据生态组件,熟悉主流数据湖技术。
5、具备优秀的逻辑思维能力,能够将复杂业务需求抽象为可落地的元数据模型。
6、具有良好的沟通协作能力,能有效推动跨团队项目中元数据能力的实施与推广。
7、有参与企业级数据中台或大型数据治理项目经验者优先,曾贡献开源元数据项目者更受青睐。
2026-08-15 12:09
IP属地:广东深圳

职位福利

本科5-10年Java数据湖要求数据开发经验Scala非外包类S
企业发布信息图
企知道科技有限公司
未融资 · 1000-9999人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

高级大数据开发工程师(数据平台)
1.5-3万元/月
数据开发5-10年本科要求数据开发经验大数据引擎开发经验Flink原理/源码
深圳 南山区
中高级大数据开发工程师(基金领域)
1.3-1.7万元/月
数据开发5-10年本科数据中心
深圳 南山区
电商数据开发工程师-有电商零售经验者优先
9000-12000元/月
数据开发1-3年本科数据建模ETL数据仓库SparkHadoopFlink电商平台
深圳 南山区
DataAnalyticsEngin
1.5-2万元/月
数据开发1-3年本科接受无数据开发经验数据分析TableauPythonSQL
深圳 南山区
数据开发工程师
2-3.5万元/月
数据开发5-10年本科Java要求数据开发经验数仓建设非外包类Spark
深圳 南山区
数据开发工程师
2-3.5万元/月
数据开发3-5年本科Java要求数据开发经验非外包类Spark计算机相关
深圳 南山区
数据治理开发专家
3-6万元/月
数据开发5-10年本科接受无数据开发经验元数据管理
深圳 南山区
大数据开发工程师
1.8-3万元/月
数据开发3-5年本科要求数据开发经验Kafka原理/源码Spark原理/源码ETL开发经验大数据引擎开发经验Flink原理/源码数据建模经验Kafka实时数仓开发经验非外包类计算机相关专业数据平台开
深圳 南山区
大数据研发工程师
1.7-2万元/月
数据开发5-10年本科hadoop离线
深圳 南山区
大数据研发工程师
1-1.7万元/月
数据开发3-5年本科数据治理ETLJavaPythonHadoopFlinkKafka有 TOB 客户交付经验有推荐系统背景
深圳 南山区