AI大数据架构师

2-4万元/月

深圳·南山区

饶女士

已实名

企业认证

深圳市先创数字技术有限公司

职位详情

数据开发

职责：
大数据平台设计：
负责企业级大数据基础平台、分布式海量数据存储与处理系统、数据分析架构的规划、搭建及研发工作。
主导大数据平台整体技术架构设计，涵盖数据采集、存储、加工、分析到输出的全流程体系建设。
参与从业务数据源到数据产品落地的端到端流程设计，并协同推动用户侧与数据类产品方向的技术决策。

技术选型与优化：
围绕Hadoop、Spark等主流框架开展技术评估、选型及核心模块开发。
持续推进平台性能提升与系统稳定性建设，包括集群调优、容错机制完善及故障应急处理。

数据治理与规范：
制定项目级数据仓库设计标准与实施规范，指导团队完成架构设计与部署落地。
建立数据治理体系，覆盖元数据管理、数据标准化、质量监控及安全管控等关键环节。

技术研发与创新：
持续跟踪大数据领域前沿技术动态，深入探索新技术在业务场景中的应用可行性。
牵头组织团队开展关键技术攻关，推动解决系统演进过程中的核心技术瓶颈。

团队管理与培养：
主导大数据研发团队组建与梯队建设，承担团队日常技术管理工作。
统筹任务分配、进度把控、代码审查与质量保障，提升团队整体工程能力与协作效率。

技能要求：
编程与框架：
熟练掌握Hadoop、HBase、Hive、Spark等大数据生态组件，具备实际项目应用经验。
熟悉Java、Python等开发语言，了解NoSQL数据库及全文检索技术的应用场景。

数据分析与决策：
具备利用大数据工具处理和分析大规模数据集的能力。
掌握常用数据挖掘算法与分析方法，能够构建有效的用户行为分析模型。

云计算与分布式系统：
拥有云计算环境下的系统部署与运维经验，理解云原生架构基本原理。
精通分布式系统工作机制，对分布式存储、实时计算、消息中间件等有扎实理解。

数据仓库与数据挖掘：
具备扎实的数据仓库建模理论基础，拥有实际的数据挖掘项目实践经验。
能根据业务需求独立完成数据仓库架构设计与挖掘方案开发。

任职要求：
学历与经验：
硕士及以上学历，计算机或相关专业背景。
5年以上大数据系统架构设计经验，具备互联网或大数据行业实战背景。

项目经验：
主导或深度参与过大型大数据平台建设项目，涵盖平台规划、架构设计、开发实施及后期优化全过程。
具备大型项目管理能力，熟悉需求调研、方案制定、项目执行、进度汇报及运维支持各阶段工作。

其他：
具有高度责任感，优秀的跨团队沟通与组织协调能力，能高效推动团队协作与任务落地。
对大数据技术有深刻认知，热衷于攻克复杂技术难题，具备强烈的技术探索热情。

2026-05-15 13:57

IP属地：广东深圳

职位福利

硕士5-10年Hadoop分布式系统云计算