职位详情
岗位职责
1. 在 Azure Databricks 环境下,设计并实现高效、稳定的数据处理流程。
2. 利用 SQL 与 Spark 完成海量数据的清洗、转换、汇总及分析计算。
3. 设计并持续优化数据仓库结构与数据模型,确保架构合理性与查询效率。
4. 搭建并维护数据服务接口,支撑报表系统及其他数据应用的使用需求。
5. 建立数据质量检查机制,保障数据结果的准确性和系统运行的稳定性。
6. 对数据处理任务进行性能调优,提升执行速度与资源利用效率。
任职要求(必需)
1. 统招本科及以上学历,计算机、软件工程或相关专业背景。
2. 具备大数据平台开发实践经验。
3. 熟练掌握 SQL,能够编写复杂查询并开展深层次性能调优。
4. 具有 Azure Databricks 平台在实际商业项目中的开发与运维经历。
5. 精通 Spark 开发技术,理解其核心机制与性能优化策略。
6. 具备 Python 编程能力,可用于脚本开发、任务自动化及数据处理任务。
7. 拥有数据仓库建模的实际项目经验。
8. 可将英语作为工作语言,熟练阅读英文技术资料、系统界面及代码内容。
9. 具备良好的沟通协作能力,能有效配合团队完成目标。
优先条件
1. 了解 Delta Lake / Data Lakehouse 架构及其应用实践。
2. 具备 Microsoft Azure 云平台使用经验,尤其是 Azure Data Factory (ADF) 与 ADLS 服务。
3. 熟悉 Databricks Unity Catalog 等数据治理工具者优先考虑。
1. 在 Azure Databricks 环境下,设计并实现高效、稳定的数据处理流程。
2. 利用 SQL 与 Spark 完成海量数据的清洗、转换、汇总及分析计算。
3. 设计并持续优化数据仓库结构与数据模型,确保架构合理性与查询效率。
4. 搭建并维护数据服务接口,支撑报表系统及其他数据应用的使用需求。
5. 建立数据质量检查机制,保障数据结果的准确性和系统运行的稳定性。
6. 对数据处理任务进行性能调优,提升执行速度与资源利用效率。
任职要求(必需)
1. 统招本科及以上学历,计算机、软件工程或相关专业背景。
2. 具备大数据平台开发实践经验。
3. 熟练掌握 SQL,能够编写复杂查询并开展深层次性能调优。
4. 具有 Azure Databricks 平台在实际商业项目中的开发与运维经历。
5. 精通 Spark 开发技术,理解其核心机制与性能优化策略。
6. 具备 Python 编程能力,可用于脚本开发、任务自动化及数据处理任务。
7. 拥有数据仓库建模的实际项目经验。
8. 可将英语作为工作语言,熟练阅读英文技术资料、系统界面及代码内容。
9. 具备良好的沟通协作能力,能有效配合团队完成目标。
优先条件
1. 了解 Delta Lake / Data Lakehouse 架构及其应用实践。
2. 具备 Microsoft Azure 云平台使用经验,尤其是 Azure Data Factory (ADF) 与 ADLS 服务。
3. 熟悉 Databricks Unity Catalog 等数据治理工具者优先考虑。
2026-03-04 10:19
IP属地:四川成都
职位福利
本科3-5年Sql

北京能科瑞元数字技术有限公司
已上市 · 1000-9999人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
1.2-1.5万/月
数据开发1-3年本科数据中台开发数据建模数据架构JavaPythonSqlHadoopSparkKafkaDOCKER-COMPOSE
成都 武侯区
1.3-2万/月
数据开发3-5年本科要求数据开发经验HDFS非外包类实时数仓开发经验计算机相关专业数据平台开发经验Flink数据治理经验SQLMapReduceShellSparkOracle数据仓库开发经验
成都 武侯区
1.6-1.8万/月
数据开发5-10年本科英语口语流利要求数据开发经验保险行业经验Spark数据平台开发经验数据治理经验PythonSQL
成都 武侯区
1.5-3万/月
数据开发3-5年本科要求数据开发经验数据库安全PostgreSQLSpark原理/源码大数据引擎开发经验数据建模经验Kafka非外包类计算机相关专业数据平台开发经验数据治理经验金融行业经验HBas
成都 武侯区









