职位详情
主要职责:
1. 数据架构设计:
- 基于Azure平台(如Databricks、SQL数据库及Azure数据工厂)构建具备高扩展性与高性能的数据架构体系。
- 部署事件中心组件,实现数据持久化机制与模式校验逻辑。
2. 数据质量与治理:
- 搭建数据质量监控与分析框架,有效处理重复数据、缺失值及异常记录。
- 落实数据治理规范,确保符合GDPR要求及相关安全实践标准。
3. 云环境集成:
- 配置并调优Azure云服务组件,包括Kubernetes、Docker及虚拟机资源。
- 实现多源数据接入,保障内外部系统间数据摄取的稳定性与连续性。
所需技能与能力
1. 技术能力:
- 熟练运用Azure相关服务,如Azure数据工厂、Azure Functions、Databricks、SQL数据库。
- 掌握Python与SQL等核心编程语言。
- 了解Kettle及Airflow DAG调度工具。
- 了解PostgreSQL/PolarDB数据库系统。
- 了解Hadoop/Spark/Flink大数据处理框架。
2. 云平台开发:
- 具备Azure与AWS云环境下的实际项目经验。
- 精通Kubernetes与Docker等容器化技术的配置与运维。
3. 语言要求:
- 英语熟练,能与来自英国、印度和德国的团队成员顺畅协作沟通。
1. 数据架构设计:
- 基于Azure平台(如Databricks、SQL数据库及Azure数据工厂)构建具备高扩展性与高性能的数据架构体系。
- 部署事件中心组件,实现数据持久化机制与模式校验逻辑。
2. 数据质量与治理:
- 搭建数据质量监控与分析框架,有效处理重复数据、缺失值及异常记录。
- 落实数据治理规范,确保符合GDPR要求及相关安全实践标准。
3. 云环境集成:
- 配置并调优Azure云服务组件,包括Kubernetes、Docker及虚拟机资源。
- 实现多源数据接入,保障内外部系统间数据摄取的稳定性与连续性。
所需技能与能力
1. 技术能力:
- 熟练运用Azure相关服务,如Azure数据工厂、Azure Functions、Databricks、SQL数据库。
- 掌握Python与SQL等核心编程语言。
- 了解Kettle及Airflow DAG调度工具。
- 了解PostgreSQL/PolarDB数据库系统。
- 了解Hadoop/Spark/Flink大数据处理框架。
2. 云平台开发:
- 具备Azure与AWS云环境下的实际项目经验。
- 精通Kubernetes与Docker等容器化技术的配置与运维。
3. 语言要求:
- 英语熟练,能与来自英国、印度和德国的团队成员顺畅协作沟通。
2026-08-31 13:49
IP属地:四川成都
职位福利
本科5-10年英语口语流利要求数据开发经验保险行业经验Spark数据平台开发经验数据治理经验PythonSQL

艾维登信息科技(北京)有限公司成都分公司
不需要融资 · 500-999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
2-5万元/月
数据开发3-5年硕士数据平台数据仓库非外包类要求数据开发经验BI报表开发经验实时数仓开发经验数据治理经验金融行业经验计算机相关专业Spark原理/源码Elasticsearch原理/源码HBase原理/源码HDFS原理/源码
成都 武侯区

高女士 · 武汉新仕佳人力资源有限公司5日内活跃
1.1-1.6万元/月
数据开发3-5年本科JavaHiveShell要求数据开发经验ScalaETL开发经验Spark数据仓库开发经验数据平台开发经验Flink数据治理经验Python
成都 武侯区
1.2-1.5万元/月
数据开发5-10年本科要求数据开发经验ETL开发经验MySQL/SQL Server实时数仓开发经验Spark计算机相关专业数据平台开发经验数据仓库开发经验Oracle金融行业经验SQL
成都 武侯区
1.5-2万元/月
数据开发5-10年本科要求数据开发经验PostgreSQLSpark原理/源码数据建模经验MySQL/SQL Server实时数仓开发经验Flink数据仓库开发经验PythonPostgreSQL原理/源
成都 武侯区
1.5-1.8万元/月
数据开发5-10年本科Azure cloud要求数据开发经验Spark数据平台开发经验数据治理经验金融行业经验Python
成都 武侯区









