职位详情
岗位职责:
1. 核心平台开发:承担基于 Apache Doris 的实时数据仓库架构设计、编码实现与持续性能优化,确保系统具备高并发处理能力与服务稳定性。
2. 调度系统集成与开发:主导 Apache DolphinScheduler 的安装部署、功能扩展与日常维护,制定并优化数据ETL任务的调度方案,保障海量数据作业的高效、可靠执行。
3. 数据服务构建:搭建并维护涵盖数据接入、数据计算(Spark/Flink)至Doris数据服务输出的端到端数据链路体系。
任职要求:
1. 编程基础:熟练掌握Java语言,具备扎实的代码能力,深入理解IO机制、多线程编程、集合框架、JVM底层原理及性能调优方法。
2. 核心大数据框架:
· 具备Spark或Flink的实际开发经验,熟悉其运行架构,并拥有任务性能调优实践经历。
· 掌握Hadoop生态常用组件(HDFS, YARN, Hive)的基本原理与使用方式。
3. 实时数仓经验:有实时数仓项目开发背景,熟练运用 Apache Doris 或 ClickHouse 至少一种,了解其数据建模方式、索引机制与查询加速策略。
4. 任务调度工具:具备 Apache DolphinScheduler 或 Azkaban、xxljob 等调度系统的部署、使用或定制化开发经验。
5. 数据管道:熟悉Kafka类消息中间件,理解其在实时计算与数据仓库中承担的数据流转角色。
6. 系统设计与解决问题能力:具备较强的系统架构设计能力与责任意识,可独立分析并解决复杂技术难题。
优先考虑:
1. 具备医疗信息化领域相关工作经验
2. 了解数据湖技术、流批一体处理模型,并参与过相关架构落地项目
3. 掌握容器化技术(Docker, Kubernetes)及配套编排工具的使用
4. 熟悉Linux系统环境,能编写基本的Shell或Python自动化脚本
5. 有数据治理、数据质量监控、数据安全防护等工具研发经验者优先
1. 核心平台开发:承担基于 Apache Doris 的实时数据仓库架构设计、编码实现与持续性能优化,确保系统具备高并发处理能力与服务稳定性。
2. 调度系统集成与开发:主导 Apache DolphinScheduler 的安装部署、功能扩展与日常维护,制定并优化数据ETL任务的调度方案,保障海量数据作业的高效、可靠执行。
3. 数据服务构建:搭建并维护涵盖数据接入、数据计算(Spark/Flink)至Doris数据服务输出的端到端数据链路体系。
任职要求:
1. 编程基础:熟练掌握Java语言,具备扎实的代码能力,深入理解IO机制、多线程编程、集合框架、JVM底层原理及性能调优方法。
2. 核心大数据框架:
· 具备Spark或Flink的实际开发经验,熟悉其运行架构,并拥有任务性能调优实践经历。
· 掌握Hadoop生态常用组件(HDFS, YARN, Hive)的基本原理与使用方式。
3. 实时数仓经验:有实时数仓项目开发背景,熟练运用 Apache Doris 或 ClickHouse 至少一种,了解其数据建模方式、索引机制与查询加速策略。
4. 任务调度工具:具备 Apache DolphinScheduler 或 Azkaban、xxljob 等调度系统的部署、使用或定制化开发经验。
5. 数据管道:熟悉Kafka类消息中间件,理解其在实时计算与数据仓库中承担的数据流转角色。
6. 系统设计与解决问题能力:具备较强的系统架构设计能力与责任意识,可独立分析并解决复杂技术难题。
优先考虑:
1. 具备医疗信息化领域相关工作经验
2. 了解数据湖技术、流批一体处理模型,并参与过相关架构落地项目
3. 掌握容器化技术(Docker, Kubernetes)及配套编排工具的使用
4. 熟悉Linux系统环境,能编写基本的Shell或Python自动化脚本
5. 有数据治理、数据质量监控、数据安全防护等工具研发经验者优先
2026-07-06 13:41
IP属地:广东广州
职位福利
本科5-10年Java大数据经验不接受居家办公DockerPostgreSQLMySQLSpark架构设计经验Spring

广州智云信息技术有限公司
未融资 · 20-99人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
JAVA高级软件工程师
1.3-2.5万元/月
Java5-10年本科不接受居家办公团队管理经验架构设计经验物联网经验SpringSpringCloudMyBatisMySQLOracleSQL Server
广州 越秀区
Java开发工程师-佛山(银行项目)
1.5-1.9万元/月
Java5-10年本科不接受居家办公分布式经验银行SpringCloudRedisSpring理财微服务经验MySQL国债MyBatis架构设计经验Oracle积存金
广州 越秀区
JAVA中级软件工程师
8000-14000元/月
Java3-5年本科不接受居家办公微服务经验物联网经验大数据经验SpringSpringCloudMyBatis
广州 越秀区 东风东







