职位详情
【岗位地点】
工作地:杭州 / 北京
【部门介绍】
阿里云计算平台拥有大数据计算分析(MaxCompute/Hologres/EMR产品系列)、AI/ML服务(PAI、灵骏)、实时/流计算(Flink、DataHub)、体系化数据调度平台(DataWorks)等产品体系,服务整个阿里巴巴集团、淘宝天猫、蚂蚁⾦服、菜鸟物流等所有子公司的业务需求,拥有海量的业务数据、超⼤规模的计算资源、⾮常丰富的业务场景。
MaxCompute 是⾯向分析的企业级 SaaS 模式云数据仓库,以 Serverless 架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效的分析处理海量数据。数以万计的企业正基于 MaxCompute 进行数据计算与分析,将数据高效转换为业务洞察。
详见介绍:阿里云MaxCompute_面向分析的企业级SaaS模式云数据仓库
TPC-BB测试 30TB/100TB 第一名:https://www.tp⋐-⋑---tpcx-bb/results/tpcxbb_perf_results5.asp
【岗位职责/要求】
围绕MaxCompute整个Serverless架构,在产品的各个层面的持续研发突破。可选 的技术方向包括:
湖仓一体化方向急招(Java/cpp):主要面向数据湖及联邦数据源构建统一的元信息,支持开放的存储和计算能力,开放的表格式和文件格式,支持非结构化数据的高效分析能力,等等
1. 计算框架和引擎(C/C++、Java):实现的高性能、功能丰富的Runtime计算引擎,主要在SIMD计算、Vectorization计算、Codegen等算子融合、LLVM编译优化、FPGA/GPU等异构硬件加速、并行Pipeline调度、近实时增量计算、Local Optimization等各个技术方向。
2. SQL优化器&编译器(Java):基于ANTLR实现Hive兼容的大数据SQL语法能力,以及基于Apache Calcite框架实现的RBO/CBO/HBO查询优化器,持续在SQL编译/查询优化方向演进,完成传统数仓高阶功能的建设,如物化视图、复杂子查询、完整窗口语义、递归CTE、超多表Join、Adaptive Execution等,并运用AI4DB、LLM大模型等新技术构建智能数仓能力。
3. 存储引擎(C/C++):围绕阿里云的核心底座盘古分布式文件系统,以AliORC的文件存储格式为核心,构建支持PB级数据量的高性能存储引擎;面向湖仓一体化架构构建丰富的外表能力,支持大部分开源湖表、仓表的读写能力;为存储计算分离架构构建统一的数据透明加速服务,大幅提高远程数据访问的吞吐、降低延迟。
4. 元数据服务(C/C++、Java):基于BigMeta架构构建新一代海量元数据系统,构建出整个平台的核心产品概念(Project、Schema、Table、Partition、Column等),支持多种内表、外表、联邦、湖仓一体化的不同场景,表级元信息已达上亿、分区和列记录达到上百亿的超大规模;构建大量的索引、统计信息,从而支持复杂的计算下推、查询优化能力等。同时提供强大的元仓能力、血缘计算等,为用户实现各种丰富的数仓建设能力。
5. 分布式调度(C/C++、Java):基于阿里云全自研的FUXI调度系统,面向异构硬件&异构环境、规模可大数万台机器规模的集群,实现分布式的资源调度、任务调度,单作业可达上万核,实现低延迟、高吞吐的调度能力;同时提供分布式shuffle service来支撑作业的Pipeline调度、数据分布式分发能力,最大化的提高调度并发度和资源利用率。
6. 框架和安全架构(CPP),在云环境中实现一套安全、稳定、可靠、网络通信高效的存储计算分离架构,支持不同语言的UDX能力,打通各种用户数据环境和其他云产品服务,每天几千万的离线大作业提供高并发的作业调度能力,并在作业的各个阶段提供查询加速能力,实现在离线一体化计算。
7. 生态应用(Java/CPP/Python等),围绕整个平台构建一系列的生态产品,包括自建SDK和CMD,开源spark,图计算,DataFrame等能力,并实现与阿里云其他云产品互联互通能力,比如与阿里云的AI平台Pai实现数据、模型、算力的联合计算、分析、训练,让用户的AI应用建设大幅度简化。
8. 数据通道(C/C++):负责将海量用户数据写入MaxCompute平台,要求极低的延迟,或极高的吞吐量,极高的稳定性条件下,支持普通表,ACID事务表,流式写入等各种各样丰富的数据管理范式。同时支持丰富语义下高性能的数据下载能力,实现数据的互联互通。
【岗位地点】
工作地:杭州 / 北京
工作地:杭州 / 北京
【部门介绍】
阿里云计算平台拥有大数据计算分析(MaxCompute/Hologres/EMR产品系列)、AI/ML服务(PAI、灵骏)、实时/流计算(Flink、DataHub)、体系化数据调度平台(DataWorks)等产品体系,服务整个阿里巴巴集团、淘宝天猫、蚂蚁⾦服、菜鸟物流等所有子公司的业务需求,拥有海量的业务数据、超⼤规模的计算资源、⾮常丰富的业务场景。
MaxCompute 是⾯向分析的企业级 SaaS 模式云数据仓库,以 Serverless 架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效的分析处理海量数据。数以万计的企业正基于 MaxCompute 进行数据计算与分析,将数据高效转换为业务洞察。
详见介绍:阿里云MaxCompute_面向分析的企业级SaaS模式云数据仓库
TPC-BB测试 30TB/100TB 第一名:https://www.tp⋐-⋑---tpcx-bb/results/tpcxbb_perf_results5.asp
【岗位职责/要求】
围绕MaxCompute整个Serverless架构,在产品的各个层面的持续研发突破。可选 的技术方向包括:
湖仓一体化方向急招(Java/cpp):主要面向数据湖及联邦数据源构建统一的元信息,支持开放的存储和计算能力,开放的表格式和文件格式,支持非结构化数据的高效分析能力,等等
1. 计算框架和引擎(C/C++、Java):实现的高性能、功能丰富的Runtime计算引擎,主要在SIMD计算、Vectorization计算、Codegen等算子融合、LLVM编译优化、FPGA/GPU等异构硬件加速、并行Pipeline调度、近实时增量计算、Local Optimization等各个技术方向。
2. SQL优化器&编译器(Java):基于ANTLR实现Hive兼容的大数据SQL语法能力,以及基于Apache Calcite框架实现的RBO/CBO/HBO查询优化器,持续在SQL编译/查询优化方向演进,完成传统数仓高阶功能的建设,如物化视图、复杂子查询、完整窗口语义、递归CTE、超多表Join、Adaptive Execution等,并运用AI4DB、LLM大模型等新技术构建智能数仓能力。
3. 存储引擎(C/C++):围绕阿里云的核心底座盘古分布式文件系统,以AliORC的文件存储格式为核心,构建支持PB级数据量的高性能存储引擎;面向湖仓一体化架构构建丰富的外表能力,支持大部分开源湖表、仓表的读写能力;为存储计算分离架构构建统一的数据透明加速服务,大幅提高远程数据访问的吞吐、降低延迟。
4. 元数据服务(C/C++、Java):基于BigMeta架构构建新一代海量元数据系统,构建出整个平台的核心产品概念(Project、Schema、Table、Partition、Column等),支持多种内表、外表、联邦、湖仓一体化的不同场景,表级元信息已达上亿、分区和列记录达到上百亿的超大规模;构建大量的索引、统计信息,从而支持复杂的计算下推、查询优化能力等。同时提供强大的元仓能力、血缘计算等,为用户实现各种丰富的数仓建设能力。
5. 分布式调度(C/C++、Java):基于阿里云全自研的FUXI调度系统,面向异构硬件&异构环境、规模可大数万台机器规模的集群,实现分布式的资源调度、任务调度,单作业可达上万核,实现低延迟、高吞吐的调度能力;同时提供分布式shuffle service来支撑作业的Pipeline调度、数据分布式分发能力,最大化的提高调度并发度和资源利用率。
6. 框架和安全架构(CPP),在云环境中实现一套安全、稳定、可靠、网络通信高效的存储计算分离架构,支持不同语言的UDX能力,打通各种用户数据环境和其他云产品服务,每天几千万的离线大作业提供高并发的作业调度能力,并在作业的各个阶段提供查询加速能力,实现在离线一体化计算。
7. 生态应用(Java/CPP/Python等),围绕整个平台构建一系列的生态产品,包括自建SDK和CMD,开源spark,图计算,DataFrame等能力,并实现与阿里云其他云产品互联互通能力,比如与阿里云的AI平台Pai实现数据、模型、算力的联合计算、分析、训练,让用户的AI应用建设大幅度简化。
8. 数据通道(C/C++):负责将海量用户数据写入MaxCompute平台,要求极低的延迟,或极高的吞吐量,极高的稳定性条件下,支持普通表,ACID事务表,流式写入等各种各样丰富的数据管理范式。同时支持丰富语义下高性能的数据下载能力,实现数据的互联互通。
【岗位地点】
工作地:杭州 / 北京
2026-07-09 13:25
IP属地:浙江杭州
职位福利
本科经验不限Java大数据经验C++分布式经验云计算经验Spark架构设计经验HBase

阿里云计算有限公司
不需要融资 · 10000人以上

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
高级逆向工程师-电商售前系统领域
1.5-2.5万元/月
Java5-10年本科GolangC++电商逆向PostgreSQLSpringCloud逆向客服SpringPython客户端开发
杭州 西湖区










