职位详情
主要职责:
1. 数据架构设计:
- 基于Azure平台(如Databricks、SQL数据库及Azure数据工厂)构建具备高扩展性与高性能的数据架构体系。
- 部署事件中心组件,实现数据持久化机制与模式校验逻辑。
2. 数据质量与治理:
- 搭建数据质量监控与分析框架,有效处理重复数据、缺失值及异常记录。
- 落实数据治理规范,确保符合GDPR要求及相关安全实践标准。
3. 云环境集成:
- 配置并调优Azure云服务组件,包括Kubernetes、Docker及虚拟机资源。
- 实现多源数据接入,保障内外部系统间数据摄取的稳定性与连续性。
所需技能与能力
1. 技术能力:
- 熟练运用Azure相关服务,如Azure数据工厂、Azure Functions、Databricks、SQL数据库。
- 掌握Python与SQL等核心编程语言。
- 了解Kettle及Airflow DAG调度工具。
- 了解PostgreSQL/PolarDB数据库系统。
- 了解Hadoop/Spark/Flink大数据处理框架。
2. 云平台开发:
- 具备Azure与AWS云环境下的实际项目经验。
- 精通Kubernetes与Docker等容器化技术的配置与运维。
3. 语言要求:
- 英语熟练,能与来自英国、印度和德国的团队成员顺畅协作沟通。
1. 数据架构设计:
- 基于Azure平台(如Databricks、SQL数据库及Azure数据工厂)构建具备高扩展性与高性能的数据架构体系。
- 部署事件中心组件,实现数据持久化机制与模式校验逻辑。
2. 数据质量与治理:
- 搭建数据质量监控与分析框架,有效处理重复数据、缺失值及异常记录。
- 落实数据治理规范,确保符合GDPR要求及相关安全实践标准。
3. 云环境集成:
- 配置并调优Azure云服务组件,包括Kubernetes、Docker及虚拟机资源。
- 实现多源数据接入,保障内外部系统间数据摄取的稳定性与连续性。
所需技能与能力
1. 技术能力:
- 熟练运用Azure相关服务,如Azure数据工厂、Azure Functions、Databricks、SQL数据库。
- 掌握Python与SQL等核心编程语言。
- 了解Kettle及Airflow DAG调度工具。
- 了解PostgreSQL/PolarDB数据库系统。
- 了解Hadoop/Spark/Flink大数据处理框架。
2. 云平台开发:
- 具备Azure与AWS云环境下的实际项目经验。
- 精通Kubernetes与Docker等容器化技术的配置与运维。
3. 语言要求:
- 英语熟练,能与来自英国、印度和德国的团队成员顺畅协作沟通。
2026-05-27 13:12
IP属地:四川成都
职位福利
本科5-10年英语口语流利要求数据开发经验保险行业经验Spark数据平台开发经验数据治理经验PythonSQL

艾维登信息科技(北京)有限公司成都分公司
不需要融资 · 500-999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
大数据开发工程师(周末双休,日活百万大平台)
1.5-2.5万元/月
数据开发1-3年本科非外包类要求数据开发经验BI报表开发经验ETL开发经验实时数仓开发经验数据治理经验数据平台开发经验数据仓库开发经验数据库内核开发经验JavaSparkHiveMySQL/SQL ServerElasticsearch
成都 武侯区

郭先生 · 鱼泡直聘刚刚活跃
数据开发-乐山商业银行
1.4-2万元/月
数据开发5-10年本科Java要求数据开发经验ETL开发经验BI报表开发经验数据平台开发经验数据仓库开发经验OracleSQL
成都 武侯区

唐先生 · 睿服科技5日内活跃
大数据开发工程师(大平台+周末双休)
1.5-2.5万元/月
数据开发3-5年本科非外包类要求数据开发经验实时数仓开发经验数据治理经验数据平台开发经验数据仓库开发经验JavaPython
成都 武侯区

胡女士 · 鱼泡直聘刚刚活跃
Power BI开发工程师
1.5-1.8万元/月
数据开发5-10年大专要求数据开发经验Power BIPowerBIBI报表开发经验PowerBI开发Spark数据平台开发经验SQL
成都 武侯区

满先生 · 晟丰原科技5日内活跃
大数据开发工程师-数据平台
1.4-1.6万元/月
数据开发5-10年本科Java要求数据开发经验电商/零售行业经验非外包类制造业行业经验Spark数据平台开发经验Flink
成都 武侯区

吕先生 · 联想利泰5日内活跃
数据分析开发
7000-10000元/月
数据开发1-3年本科JavaDoris原理/源码Clickhouse原理/源码要求数据开发经验Elasticsearch原理/源码Spark原理/源码大数据引擎开发经验GoKafka非外包类Oracl
成都 武侯区

侯女士 · 十里风和5日内活跃






