搜索
登录注册

职位详情

岗位职责:
1. 数据仓库建设:具备扎实的数据仓库构建能力,熟悉数据建模、ETL流程的设计与开发工作。
2. 核心业务开发:主导大数据项目中核心模块的架构设计与编码实现,保障系统稳定运行与高效处理能力。
3. 技术探索与创新:参与大数据领域前沿技术的研究与验证,为业务发展提供技术支撑,推动技术迭代升级。
4. 数据采集与同步:通过Dinky平台编写FlinkSQL任务消费Kafka中的用户行为日志,并将数据写入Doris、Paimon、Hudi及Iceberg的ODS层;使用DolphinScheduler调度SeaTunnel作业,完成MySQL业务数据向Doris ODS层的同步。
5. 数仓架构规划:采用ODS(操作数据存储)→ DWD(明细数据层)/ DIM(维度层)→ DWS(汇总服务层)→ ADS(应用数据层)的四层架构体系,保障数据在Doris、Paimon、Hudi和Iceberg中的分层流转与统一管理。
6. 数据展示与呈现:运用大屏可视化工具及报表系统,对ADS层和DWS层关键指标进行报表制作与动态展示,辅助决策分析。

任职要求:
1. 学历要求:本科及以上学历,计算机、软件工程、数学等相关专业,具有3年以上大数据开发相关经验。
2. 编程能力:熟练掌握Java语言,熟悉Linux操作系统及常用命令,具备Shell脚本编写能力,拥有良好的独立开发习惯和规范的编码风格。
3. 大数据技术栈:有基于PostgreSQL、Doris、Paimon、Hudi、Iceberg、Hadoop、HBase、Kafka等技术的实际开发、架构设计与性能调优经验,深入理解大数据平台底层原理。
4. 流式计算框架:熟悉Spark或Flink技术栈,对Flink或Spark的运行机制和底层架构有深入认知。
5. ETL与建模经验:精通数据仓库ETL流程与数据建模方法,具备大型数仓的整体架构设计、模型构建及性能优化实践经验。
2026-08-05 14:40
IP属地:山西太原

职位福利

本科3-5年Java要求数据开发经验数据建模经验非外包类数据仓库开发经验Oracle
企业发布信息图
山西智杰软件工程有限公司
B轮 · 100-499人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

高级大数据研发工程师
9000-14000元/月
数据开发3-5年本科JavaHiveFlink大数据开发经验数仓建设经验ETL开发经验
太原 小店区
大数据开发工程师
9000-14000元/月
数据开发3-5年本科
大同
体彩预测小龙虾api数据
100-200元/天
兼职数据开发经验不限学历不限
运城 盐湖区
临汾尧都区招钢结构安装/打板
300-400元/天
钢结构打板1-2人
临汾 尧都区2026年08月11日 10:43

张先生

刚刚活跃
晋中寿阳县招塔吊司机替班,有人了给我打电话
7000-8000元/月
塔吊司机1-2人
晋中 寿阳县2026年08月11日 10:42

解先生

今日活跃
运城芮城县招氩弧焊
300-400元/天
氩弧焊工1-2人
运城 芮城县2026年08月11日 10:42

王先生

刚刚活跃
要几名看机器的 320一天包吃住 人走账清 不需要经验和学历
300-320元/天
普工/操作工免费培训包吃保险高温补贴社保加班补贴包住11-20人日结
临汾 大宁县2026年08月11日 10:42
晋中榆次区招管道保温
管道保温
晋中 榆次区2026年08月11日 10:42
★美的制造工厂★320/天日结+贴标包装+保底9000包吃住
9000-10000元/月
贴标签免费培训包吃有提成交通补助夜班补贴保险餐补高温补贴社保加班补贴五险五险一金包住20人以上月结
太原 小店区2026年08月11日 10:42