职位详情
主要职责:
1. 数据架构设计:
- 基于Azure平台(如Databricks、SQL数据库及Azure数据工厂)构建具备高扩展性与高性能的数据架构体系。
- 部署事件中心组件,实现数据持久化机制与模式校验逻辑。
2. 数据质量与治理:
- 搭建数据质量监控与分析框架,有效处理重复数据、缺失值及异常记录。
- 落实数据治理规范,确保符合GDPR要求及相关安全实践标准。
3. 云环境集成:
- 配置并调优Azure云服务组件,包括Kubernetes、Docker及虚拟机资源。
- 实现多源数据接入,保障内外部系统间数据摄取的稳定性与连续性。
所需技能与能力
1. 技术能力:
- 熟练运用Azure相关服务,如Azure数据工厂、Azure Functions、Databricks、SQL数据库。
- 掌握Python与SQL等核心编程语言。
- 了解Kettle及Airflow DAG调度工具。
- 了解PostgreSQL/PolarDB数据库系统。
- 了解Hadoop/Spark/Flink大数据处理框架。
2. 云平台开发:
- 具备Azure与AWS云环境下的实际项目经验。
- 精通Kubernetes与Docker等容器化技术的配置与运维。
3. 语言要求:
- 英语熟练,能与来自英国、印度和德国的团队成员顺畅协作沟通。
1. 数据架构设计:
- 基于Azure平台(如Databricks、SQL数据库及Azure数据工厂)构建具备高扩展性与高性能的数据架构体系。
- 部署事件中心组件,实现数据持久化机制与模式校验逻辑。
2. 数据质量与治理:
- 搭建数据质量监控与分析框架,有效处理重复数据、缺失值及异常记录。
- 落实数据治理规范,确保符合GDPR要求及相关安全实践标准。
3. 云环境集成:
- 配置并调优Azure云服务组件,包括Kubernetes、Docker及虚拟机资源。
- 实现多源数据接入,保障内外部系统间数据摄取的稳定性与连续性。
所需技能与能力
1. 技术能力:
- 熟练运用Azure相关服务,如Azure数据工厂、Azure Functions、Databricks、SQL数据库。
- 掌握Python与SQL等核心编程语言。
- 了解Kettle及Airflow DAG调度工具。
- 了解PostgreSQL/PolarDB数据库系统。
- 了解Hadoop/Spark/Flink大数据处理框架。
2. 云平台开发:
- 具备Azure与AWS云环境下的实际项目经验。
- 精通Kubernetes与Docker等容器化技术的配置与运维。
3. 语言要求:
- 英语熟练,能与来自英国、印度和德国的团队成员顺畅协作沟通。
2026-07-12 13:07
IP属地:四川成都
职位福利
本科5-10年英语口语流利要求数据开发经验保险行业经验Spark数据平台开发经验数据治理经验PythonSQL

艾维登信息科技(北京)有限公司成都分公司
不需要融资 · 500-999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
大数据开发+福利待遇优厚+双休
1-1.5万元/月
数据开发3-5年本科要求数据开发经验ETL开发经验BI报表开发经验MySQL/SQL Server大型互联网云平台基础服务实时数仓开发经验pysparkpower bi数据仓库开发经验Pythons
成都 武侯区
高级大数据工程师
1.5-2.4万元/月
数据开发3-5年本科非外包类要求数据开发经验ETL开发经验数据建模经验计算机相关专业数据平台开发经验大数据引擎开发经验JavaGoSparkKafkaSpark原理/源码Kafka原理/源码
成都 武侯区
高级大数据开发工程师
1.4-2.1万元/月
数据开发5-10年本科要求数据开发经验ElasticsearchSAAS非外包类计算机相关专业数据平台开发经验大数据Python
成都 武侯区










