职位详情
核心岗位职责
1) 架构设计与技术决策
-- 主导数据中心整体技术架构的规划与实施,涵盖数据链路(采集-存储-计算-服务)、微服务架构及大数据组件集群架构,输出完整架构文档并推动方案落地执行。
-- 负责关键技术选型,针对Kafka、Hive、PostgreSQL、Flink、ClickHouse等组件的集群部署模式、高可用机制和性能优化路径进行评估与决策。
-- 牵头攻克数据中心建设过程中的关键技术难题,包括大规模数据存储的性能瓶颈、高并发数据服务的稳定性保障、实时与离线数据融合的技术方案设计等。
2) 数据服务与组件深度开发
-- 主导核心数据服务的架构设计,指导团队完成RESTful API与RPC接口开发,确保接口具备高性能与良好的可扩展能力。
-- 推动大数据组件的二次开发与深度性能调优,如Kafka消息积压治理、Hive小文件合并优化、海量数据查询中笛卡尔积问题的深度处理、Flink流任务因谓词下推引发的数据一致性问题修复、PostgreSQL分库分表策略的实际落地。
-- 参与数据资产管理平台、任务调度系统等关键后台系统的架构设计,主导核心模块的技术实现与质量把控。
3) 其他工作:承担技术文档编写任务,参与团队管理事务,并完成上级交办的其他工作任务。
任职要求
1) 本科及以上学历,具备5年以上Java后端开发经验;
2) 扎实掌握Java基础(集合框架、多线程编程、JVM调优、IO/NIO),深入理解Spring Boot与Spring Cloud微服务架构原理,具有实际的微服务系统设计与性能调优经验;
3) 精通Kafka底层机制与应用场景,拥有集群架构设计、分区策略优化、消息可靠性保障以及高并发环境下的性能调优实战经验,具备大数据组件的深度使用背景;
4) 熟练使用Git、Maven/Gradle工具,熟悉CI/CD流程,具备自动化部署经验,有容器化技术(Docker/K8s)应用者优先;
5) 熟练操作Hive、PostgreSQL、ClickHouse,具备分布式表结构设计、索引优化、查询性能提升及分库分表方案落地经验,能够为TB级数据场景设计高效的数据存储与检索方案;
6) 熟悉Hadoop、Spark、Flink等主流计算框架,具备实时与离线数据处理能力,掌握ETL体系架构设计方法;
7) 具备良好的沟通协作能力,能有效配合团队推进项目进展。
1) 架构设计与技术决策
-- 主导数据中心整体技术架构的规划与实施,涵盖数据链路(采集-存储-计算-服务)、微服务架构及大数据组件集群架构,输出完整架构文档并推动方案落地执行。
-- 负责关键技术选型,针对Kafka、Hive、PostgreSQL、Flink、ClickHouse等组件的集群部署模式、高可用机制和性能优化路径进行评估与决策。
-- 牵头攻克数据中心建设过程中的关键技术难题,包括大规模数据存储的性能瓶颈、高并发数据服务的稳定性保障、实时与离线数据融合的技术方案设计等。
2) 数据服务与组件深度开发
-- 主导核心数据服务的架构设计,指导团队完成RESTful API与RPC接口开发,确保接口具备高性能与良好的可扩展能力。
-- 推动大数据组件的二次开发与深度性能调优,如Kafka消息积压治理、Hive小文件合并优化、海量数据查询中笛卡尔积问题的深度处理、Flink流任务因谓词下推引发的数据一致性问题修复、PostgreSQL分库分表策略的实际落地。
-- 参与数据资产管理平台、任务调度系统等关键后台系统的架构设计,主导核心模块的技术实现与质量把控。
3) 其他工作:承担技术文档编写任务,参与团队管理事务,并完成上级交办的其他工作任务。
任职要求
1) 本科及以上学历,具备5年以上Java后端开发经验;
2) 扎实掌握Java基础(集合框架、多线程编程、JVM调优、IO/NIO),深入理解Spring Boot与Spring Cloud微服务架构原理,具有实际的微服务系统设计与性能调优经验;
3) 精通Kafka底层机制与应用场景,拥有集群架构设计、分区策略优化、消息可靠性保障以及高并发环境下的性能调优实战经验,具备大数据组件的深度使用背景;
4) 熟练使用Git、Maven/Gradle工具,熟悉CI/CD流程,具备自动化部署经验,有容器化技术(Docker/K8s)应用者优先;
5) 熟练操作Hive、PostgreSQL、ClickHouse,具备分布式表结构设计、索引优化、查询性能提升及分库分表方案落地经验,能够为TB级数据场景设计高效的数据存储与检索方案;
6) 熟悉Hadoop、Spark、Flink等主流计算框架,具备实时与离线数据处理能力,掌握ETL体系架构设计方法;
7) 具备良好的沟通协作能力,能有效配合团队推进项目进展。
2026-07-01 14:40
IP属地:广东深圳
职位福利
本科5-10年JavaHive要求有数据开发经验MySQLKafka数据平台开发经验数据治理经验Flink要求数据开发/架构经验Python

德科信息有限公司
不需要融资 · 1000-9999人


鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
数据治理专家
1.5-2万元/月
数据架构师5-10年本科大数据引擎架构经验要求有数据架构经验Spark原理/源码其他其他数据架构经验数据治理经验要求数据开发/架构经验数学/统计相关专业
深圳 福田区
高级大数据架构师(央-双休)
1.5-2.2万元/月
数据架构师3-5年本科JavaHive要求有数据架构经验数据平台架构经验PostgreSQLKafka数据仓库架构经验计算机相关专业要求数据开发/架构经验SQL
深圳 福田区
大数据解决方案架构师
4-6.5万元/月
数据架构师5-10年本科大数据引擎架构经验数据平台架构经验Clickhouse原理/源码Elasticsearch原理/源码Doris/Druid原理/源码HDFSFlink数据治理经验Hive要求有数据架
深圳

先生 · 腾讯5日内活跃
数据技术架构师-黄阁坑
2.9-3万元/月
数据架构师10年以上本科大数据引擎架构经验数据平台架构经验Kafka原理/源码ScalaSpark原理/源码Flink原理/源码KafkaFlink数据治理经验Hive要求有数据架构经验Hive原理/源
深圳 龙岗区







