职位详情
岗位职责:
1. 核心平台开发:承担基于 Apache Doris 的实时数据仓库架构设计、开发与持续性能优化,确保系统具备高并发处理能力与服务稳定性。
2. 调度系统集成与开发:负责 Apache DolphinScheduler 的安装部署、功能扩展及日常维护,制定并优化ETL任务调度方案,保障海量数据作业的高效、可靠执行。
3. 数据服务构建:打造并维护涵盖数据接入、数据处理(Spark/Flink)至 Doris 服务输出的端到端数据链路体系。
任职要求:
1. 编程基础:熟练掌握Java语言,具备扎实的编码能力,深入理解IO机制、多线程编程、集合框架、JVM工作原理及性能调优方法。
2. 核心大数据框架:
· 具备Spark或Flink的实际开发经验,熟悉其运行架构,并有典型任务性能调优实践。
· 掌握Hadoop生态常用组件(HDFS, YARN, Hive)的基本原理与使用场景。
3. 实时数仓经验:具有实时数据仓库建设经验,熟练运用 Apache Doris 或 ClickHouse 至少一种,了解其数据建模方式、索引机制与查询加速策略。
4. 任务调度工具:具备 Apache DolphinScheduler 或 Azkaban、xxljob 等调度系统的实际操作、部署或定制化开发经历。
5. 数据管道:熟悉Kafka等消息中间件,理解其在实时计算与数仓协同中的数据流转逻辑。
6. 系统设计与解决问题能力:具备较强的系统架构设计能力与责任意识,能够独立分析并解决复杂技术难题。
优先考虑:
1. 具备医疗信息化领域项目背景者优先
2. 了解数据湖技术、流批一体架构,并参与过相关落地项目
3. 掌握容器化技术(Docker, Kubernetes)及配套编排工具的使用
4. 熟悉Linux环境,具备Shell或Python脚本编写能力
5. 有数据治理、数据质量监控、数据安全类工具开发经验者优先
1. 核心平台开发:承担基于 Apache Doris 的实时数据仓库架构设计、开发与持续性能优化,确保系统具备高并发处理能力与服务稳定性。
2. 调度系统集成与开发:负责 Apache DolphinScheduler 的安装部署、功能扩展及日常维护,制定并优化ETL任务调度方案,保障海量数据作业的高效、可靠执行。
3. 数据服务构建:打造并维护涵盖数据接入、数据处理(Spark/Flink)至 Doris 服务输出的端到端数据链路体系。
任职要求:
1. 编程基础:熟练掌握Java语言,具备扎实的编码能力,深入理解IO机制、多线程编程、集合框架、JVM工作原理及性能调优方法。
2. 核心大数据框架:
· 具备Spark或Flink的实际开发经验,熟悉其运行架构,并有典型任务性能调优实践。
· 掌握Hadoop生态常用组件(HDFS, YARN, Hive)的基本原理与使用场景。
3. 实时数仓经验:具有实时数据仓库建设经验,熟练运用 Apache Doris 或 ClickHouse 至少一种,了解其数据建模方式、索引机制与查询加速策略。
4. 任务调度工具:具备 Apache DolphinScheduler 或 Azkaban、xxljob 等调度系统的实际操作、部署或定制化开发经历。
5. 数据管道:熟悉Kafka等消息中间件,理解其在实时计算与数仓协同中的数据流转逻辑。
6. 系统设计与解决问题能力:具备较强的系统架构设计能力与责任意识,能够独立分析并解决复杂技术难题。
优先考虑:
1. 具备医疗信息化领域项目背景者优先
2. 了解数据湖技术、流批一体架构,并参与过相关落地项目
3. 掌握容器化技术(Docker, Kubernetes)及配套编排工具的使用
4. 熟悉Linux环境,具备Shell或Python脚本编写能力
5. 有数据治理、数据质量监控、数据安全类工具开发经验者优先
2026-07-06 14:27
IP属地:广东广州
职位福利
本科5-10年Java大数据经验不接受居家办公DockerPostgreSQLMySQLSpark架构设计经验Spring

广州智云信息技术有限公司
未融资 · 20-99人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
JAVA高级软件工程师
1.3-2.5万元/月
Java5-10年本科不接受居家办公团队管理经验架构设计经验物联网经验SpringSpringCloudMyBatisMySQLOracleSQL Server
广州 越秀区
Java开发工程师-佛山(银行项目)
1.5-1.9万元/月
Java5-10年本科不接受居家办公分布式经验银行SpringCloudRedisSpring理财微服务经验MySQL国债MyBatis架构设计经验Oracle积存金
广州 越秀区
JAVA中级软件工程师
8000-14000元/月
Java3-5年本科不接受居家办公微服务经验物联网经验大数据经验SpringSpringCloudMyBatis
广州 越秀区 东风东







