职位详情
大数据开发工程师
职责描述:
1.负责数据仓库的ETL流程开发,涵盖离线、准实时及实时数据任务的构建与维护;
2.参与企业级数据平台的架构设计与开发,包括OLAP查询引擎及相关平台化系统的实现;
3.主导数据仓库与数据湖的模型设计与管理,持续优化数据存储结构与查询性能;
4.关注并引入先进的数据处理技术与工具,推动数据开发流程优化与处理效率提升;
任职要求:
1.计算机相关专业背景,具备5年以上数据仓库开发与实施经验,深入了解主流大数据技术体系;
2.熟悉Mysql、Hbase、Hive、Doris、ClickHouse、ES等存储组件架构,能结合业务场景完成合理技术选型;
3.精通Hadoop、Spark、Flink、Kafka等大数据框架,具有海量数据处理实战能力;熟练使用DataWorks、kettle等ETL工具;
4.具备离线数仓(湖)与实时数仓(湖)的架构设计能力,并有成功落地项目经验(必需);
5.熟悉Iceberg技术框架并拥有实际开发应用经历;
6.精通至少一门编程语言,如Java、Python;
职责描述:
1.负责数据仓库的ETL流程开发,涵盖离线、准实时及实时数据任务的构建与维护;
2.参与企业级数据平台的架构设计与开发,包括OLAP查询引擎及相关平台化系统的实现;
3.主导数据仓库与数据湖的模型设计与管理,持续优化数据存储结构与查询性能;
4.关注并引入先进的数据处理技术与工具,推动数据开发流程优化与处理效率提升;
任职要求:
1.计算机相关专业背景,具备5年以上数据仓库开发与实施经验,深入了解主流大数据技术体系;
2.熟悉Mysql、Hbase、Hive、Doris、ClickHouse、ES等存储组件架构,能结合业务场景完成合理技术选型;
3.精通Hadoop、Spark、Flink、Kafka等大数据框架,具有海量数据处理实战能力;熟练使用DataWorks、kettle等ETL工具;
4.具备离线数仓(湖)与实时数仓(湖)的架构设计能力,并有成功落地项目经验(必需);
5.熟悉Iceberg技术框架并拥有实际开发应用经历;
6.精通至少一门编程语言,如Java、Python;
2026-06-20 13:33
IP属地:上海
职位福利
本科5-10年ERP要求数据开发经验Spark原理/源码ScalaFlink原理/源码实时数仓开发经验数据平台开发经验财务SQLHive供应链业财一体化Hive原理/源码MESSpark

北京玲珑塔科技有限公司
未融资 · 100-499人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
大数据开发工程师
1.8-2.5万元/月
数据开发3-5年本科Java要求数据开发经验ETL开发经验Kafka非外包类计算机相关专业FlinkSQLHIVE其他数据开发经验SparkHbase大数据Python
上海 浦东新区
数据开发工程师-需掌握python
1.3-1.7万元/月
数据开发3-5年本科要求数据开发经验ElasticsearchETL开发经验KafkaMySQL/SQL ServerBI报表开发经验计算机相关专业数据仓库开发经验数据平台开发经验金融行业经验Pyth
上海 浦东新区
大数据开发
1.2-1.4万元/月
数据开发3-5年本科Java要求数据开发经验Kafka原理/源码没有Spark原理/源码ETL开发经验Flink原理/源码大数据引擎开发经验数据建模经验KafkaMySQL/SQL ServerOr
上海 浦东新区
数据开发
1-1.5万元/月
数据开发3-5年本科Java要求数据开发经验ETL开发经验Kafka计算机相关专业数据平台开发经验Flink数据治理经验金融行业经验SQLHiveSpark数据仓库开发经验Python
上海 浦东新区









