职位详情
岗位职责:
(1)具备出色的数据开发与处理能力,承担公司大数据治理平台核心业务模块及计算引擎的开发与运维工作,基于Hadoop、Spark、Flink等主流技术体系,构建高效率、高可用的数据处理流程,满足业务数据化运营的技术支撑需求。
(2)面向业务数据应用,负责数据分析方案设计、数据接口开发、基础与汇总模型构建以及ETL流程的研发与实施。
(3)参与项目需求沟通与分析,主导数据接入、清洗和加工等关键环节的技术实现。
(4)具备扎实的系统问题诊断与定位能力,能够独立应对并解决复杂系统运行中的各类技术难题。
任职要求:
(1)计算机、软件工程、自动化等相关专业硕士及以上学历;
(2)3年以上大数据开发领域工作经验,完整参与过大型大数据项目从架构设计到生产上线的全过程;
(3)具有大数据治理平台的设计与研发背景,具备ETL管道开发的实际经验(必需);
(4)拥有主流湖仓一体架构开发经历,曾参与大规模湖仓建设项目,掌握数据仓库建模、ETL开发、多维模型设计及流批一体计算架构,具备模型优化与性能调优能力(必需);
(5)能高效响应算法团队的数据支持需求,协同开展数据产品建设、特征工程处理及数据模型研发,运用机器学习方法推进数据分析场景落地;
(6)熟练掌握Python编程语言,代码功底扎实,遵循良好编码规范,可独立完成复杂功能模块的开发任务;
(7)深入理解Flink、Spark、Kafka、Hive、Hbase、Doris、Clickhouse、HDFS、Zookeeper、MR等大数据组件,具备部署搭建、性能调优、日常运维与开发集成能力;
(8)掌握数据库核心技术,熟悉关系型数据库(如MySQL、PostgreSQL)和非关系型数据库(如MongoDB、ElasticSearch、Redis)的应用场景,精通SQL与NoSQL解决方案,能够完成数据库结构设计、性能优化与日常管理;
(9)熟悉ETL开发全流程,具备在复杂数据环境下进行故障排查与性能提升的能力,可有效应对数据倾斜、任务异常、资源瓶颈等问题;
(10)熟悉Unix/Linux操作系统基本操作,能在该环境下完成开发、部署与问题定位,掌握常用命令与脚本编写,具备Docker、K8s容器化部署实践经验;
(11)有实时计算或流式处理项目经验者优先,熟悉Flink CDC、Debezium等数据同步工具者更佳;
(12)具备良好的沟通表达能力和团队协作意识,工作积极主动,能够推动跨团队协作与技术成果推广应用。
(1)具备出色的数据开发与处理能力,承担公司大数据治理平台核心业务模块及计算引擎的开发与运维工作,基于Hadoop、Spark、Flink等主流技术体系,构建高效率、高可用的数据处理流程,满足业务数据化运营的技术支撑需求。
(2)面向业务数据应用,负责数据分析方案设计、数据接口开发、基础与汇总模型构建以及ETL流程的研发与实施。
(3)参与项目需求沟通与分析,主导数据接入、清洗和加工等关键环节的技术实现。
(4)具备扎实的系统问题诊断与定位能力,能够独立应对并解决复杂系统运行中的各类技术难题。
任职要求:
(1)计算机、软件工程、自动化等相关专业硕士及以上学历;
(2)3年以上大数据开发领域工作经验,完整参与过大型大数据项目从架构设计到生产上线的全过程;
(3)具有大数据治理平台的设计与研发背景,具备ETL管道开发的实际经验(必需);
(4)拥有主流湖仓一体架构开发经历,曾参与大规模湖仓建设项目,掌握数据仓库建模、ETL开发、多维模型设计及流批一体计算架构,具备模型优化与性能调优能力(必需);
(5)能高效响应算法团队的数据支持需求,协同开展数据产品建设、特征工程处理及数据模型研发,运用机器学习方法推进数据分析场景落地;
(6)熟练掌握Python编程语言,代码功底扎实,遵循良好编码规范,可独立完成复杂功能模块的开发任务;
(7)深入理解Flink、Spark、Kafka、Hive、Hbase、Doris、Clickhouse、HDFS、Zookeeper、MR等大数据组件,具备部署搭建、性能调优、日常运维与开发集成能力;
(8)掌握数据库核心技术,熟悉关系型数据库(如MySQL、PostgreSQL)和非关系型数据库(如MongoDB、ElasticSearch、Redis)的应用场景,精通SQL与NoSQL解决方案,能够完成数据库结构设计、性能优化与日常管理;
(9)熟悉ETL开发全流程,具备在复杂数据环境下进行故障排查与性能提升的能力,可有效应对数据倾斜、任务异常、资源瓶颈等问题;
(10)熟悉Unix/Linux操作系统基本操作,能在该环境下完成开发、部署与问题定位,掌握常用命令与脚本编写,具备Docker、K8s容器化部署实践经验;
(11)有实时计算或流式处理项目经验者优先,熟悉Flink CDC、Debezium等数据同步工具者更佳;
(12)具备良好的沟通表达能力和团队协作意识,工作积极主动,能够推动跨团队协作与技术成果推广应用。
2025-12-31 17:05
IP属地:天津
职位福利
硕士3-5年数据治理ETLSqlPythonHadoopFlinkSpark

天津晟颂企业管理咨询有限责任公司

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
8千-1万/月
数据开发3-5年本科JavaHDFS原理/源码要求数据开发经验Kafka原理/源码Spark原理/源码大数据引擎开发经验数据建模经验KafkaMySQL/SQL ServerHDFS非外包类数据平台
天津 滨海新区
500-600元/天
数据开发3-5年本科JavaSqlShellHadoopFlinkSparkRESTfulSPRINGCLOUD
天津 滨海新区









