搜索
登录注册

职位详情

大数据开发工程师

职责描述:
1.负责数据仓库的ETL流程开发,涵盖离线、准实时及实时数据任务的构建与维护;
2.参与企业级数据平台的架构设计与开发,包括OLAP查询引擎及相关平台化系统的实现;
3.主导数据仓库与数据湖的模型设计与管理,持续优化数据存储结构与查询性能;
4.关注并引入先进的数据处理技术与工具,推动数据开发流程优化与处理效率提升;

任职要求:
1.计算机相关专业背景,具备5年以上数据仓库开发与实施经验,深入了解主流大数据技术体系;
2.熟悉Mysql、Hbase、Hive、Doris、ClickHouse、ES等存储组件架构,能结合业务场景完成合理技术选型;
3.精通Hadoop、Spark、Flink、Kafka等大数据框架,具有海量数据处理实战能力;熟练使用DataWorks、kettle等ETL工具;
4.具备离线数仓(湖)与实时数仓(湖)的架构设计能力,并有成功落地项目经验(必需);
5.熟悉Iceberg技术框架并拥有实际开发应用经历;
6.精通至少一门编程语言,如Java、Python;
2026-09-26 15:05
IP属地:上海

职位福利

本科5-10年ERP要求数据开发经验Spark原理/源码ScalaFlink原理/源码实时数仓开发经验数据平台开发经验财务SQLHive供应链业财一体化Hive原理/源码MESSpark
企业发布信息图
北京玲珑塔科技有限公司
未融资 · 100-499人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

1.2-1.5万/月
数据开发1-3年本科要求数据开发经验Linux银行MySQL其他数据平台开发经验Oracle金融SQL
上海 浦东新区
9千-1.3万/月
数据开发1-3年本科Hive要求数据开发经验BI报表开发经验MySQL/SQL Server非外包类Spark数据仓库开发经验OraclePythonSQL
上海 浦东新区
1.1-1.3万/月
数据开发1-3年本科JavaClickhouse原理/源码要求数据开发经验Spark原理/源码ETL开发经验大数据引擎开发经验KafkaMySQL/SQL Server计算机相关专业数据平台开发经验数
上海 浦东新区
1.5-1.6万/月
数据开发5-10年本科Java要求数据开发经验制造业BI报表开发经验实时数仓开发经验业财穿透数据平台开发经验数据治理经验Flink生产制造金融行业经验
上海 浦东新区
1.5-1.6万/月
数据开发5-10年本科JavaHive要求数据开发经验BI报表开发经验实时数仓开发经验数据仓库开发经验FlinkPython
上海 浦东新区
1.4-2万/月
数据开发3-5年本科Java要求数据开发经验ETL开发经验大数据引擎开发经验计算机相关专业数据平台开发经验金融行业经验HBaseHBase原理/源码HiveElasticsearchHive原理/源
上海 浦东新区
1.6-1.7万/月
数据开发5-10年本科能源要求数据开发经验化工制造业BI报表开发经验Spark工业背景数据平台开发经验SQL
上海 浦东新区
1.3-1.4万/月
数据开发3-5年本科Shell要求数据开发经验LinuxMySQL/SQL Server计算机相关专业数据平台开发经验数据仓库开发经验Oracle金融行业经验Python
上海 浦东新区
1.2-1.6万/月
数据开发3-5年本科要求数据开发经验ETL开发经验证券实时数仓开发经验数据平台开发经验Flink金融行业经验SQLHBaseHiveBI报表开发经验Spark数据仓库开发经验基金
上海 浦东新区