搜索
登录注册

职位详情

工作职责:
1. 数据建模与设计;20%
运用维度建模与实体关系建模方法,设计符合业务需求的数据仓库逻辑及物理模型
通过ER/Studio、PowerDesigner等工具实现模型的可视化构建与结构优化

2. 数据开发与ETL流程构建;25%
基于Hive/Spark/Flink进行数据处理程序的开发,持续优化ETL链路效率
配置Informatica/Kettle完成数据抽取转换任务,结合Azkaban/Oozie实现作业调度,确保数据一致性

3. SQL编写与优化;15%
编写高效复杂SQL查询语句,优化执行计划(包括索引策略、分区表设计、SQL重构)
维护数据库对象(表、视图、存储过程),提升数据读写性能与访问响应速度

4. 大数据组件应用与维护;20%
负责Hadoop/Hive/Spark/Flink集群的部署与日常维护,开展参数调优(如HDFS配置、Spark内存管理)
监控各组件运行状态,配合运维团队定位并解决系统故障与性能瓶颈

5. 业务理解与协作;10%
深入掌握企业业务流程,与业务方紧密沟通,提供匹配场景的数据支持方案

6. BI工具协作;10%
对接Tableau/PowerBI数据模型需求,调整底层数据结构以优化报表展示逻辑与加载效率

任职资格
1、教育背景与职业/执业资格:计算机类相关专业本科及以上学历;5%
2、工作经验及行业背景:具备3年以上大数据开发经历,主导完成不少于2个复杂ETL项目;20%
3、能力要求(专业技能/语言要求):65%
- 技术能力
熟练掌握Hive/Spark/Flink技术栈,能高效使用Informatica/Kettle/Azkaban等工具链
- 数据建模
掌握维度建模与实体关系建模原理,熟悉ER/Studio和PowerDesigner建模工具操作
- SQL与优化
具备复杂SQL编写经验,拥有执行计划分析及索引优化实战能力

人才核心特质要求(除通用标准外):10%
具备严谨的逻辑思维、突出的问题排查能力以及良好的跨部门协同意识

关注:
1. 大数据技术栈spark flink hive kafka clickhouse的底层架构与运行机制,了解java基础
2. 主流数据库之间的特性差异与适用场景对比
3. AI技术在数据领域的实际应用探索
4. 熟悉离线数仓、实时数仓及数据中台的整体架构与建设思路
5. 各类大数据框架的性能调优实践经验
2026-05-06 10:28
IP属地:辽宁大连

职位福利

本科3-5年数据建模JavaKafkaFlinkSpark
企业发布信息图
悠派才选(上海)人力资源有限公司
未融资 · 10000人以上
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

数据开发工程师(大连)
1-1.8万元/月
数据开发5-10年本科Sql熟悉HIVE和ORACLE数据库
大连 沙河口区
大数据开发
7000-10000元/月
数据开发1-3年本科C/C++要求数据开发经验Hive原理/源码Spark原理/源码大数据引擎开发经验计算机相关专业Python
大连
数据开发
8000-10000元/月
数据开发1-3年本科Hive要求数据开发经验Hadoop其他Spark数据平台开发经验Python
大连 甘井子区
数据开发
8000-10000元/月
数据开发1-3年本科Hive要求数据开发经验Hadoop其他Spark数据平台开发经验Python
大连
大数据开发
7000-10000元/月
数据开发1-3年本科C/C++要求数据开发经验Hive原理/源码Spark原理/源码大数据引擎开发经验计算机相关专业Python
大连 甘井子区
日语RPA开发工程师
1-1.5万元/月
数据开发5-10年本科接受无数据开发经验RPAVBA日语sharepoint workflowPowerautomate
大连
hadoop大数据开发工程师
1.1-1.3万元/月
数据开发1-3年本科数据架构数据建模ETLHadoopSpark分布式系统数据平台搭建业务数据化支撑
沈阳 和平区
数据开发工程师
1-1.3万元/月
数据开发1-3年本科数据治理数据中台开发Sql
沈阳 和平区
数据处理开发工程师
800-1200元/天
兼职数据开发Hadoop3-5年本科外包类要求数据开发经验BI报表开发经验ETL开发经验实时数仓开发经验数据治理经验数据建模经验数据平台开发经验数据仓库开发经验大数据引擎开发经验数据库内核开发经验其他数据开发经验JavaPythonC/C++SQLScalaSparkHiveFlinkHBaseKafkaSpark原理/源码Flink原理/源码Hive原理/源码Elasticsearch原理/源码HBase原理/源码MySQL原理/源码PostgreSQL原理/源码Oracle原理/源码
沈阳 沈河区 万莲