搜索
登录注册

职位详情

大数据开发工程师

职责描述:
1.负责数据仓库的ETL流程开发,涵盖离线、准实时及实时数据任务的构建与维护;
2.参与公司数据平台的整体设计与开发,包括OLAP查询引擎及相关产品和平台化功能的研发;
3.主导数据仓库与数据湖的架构设计与管理,持续优化数据存储结构与查询效率;
4.关注并引入前沿的数据处理技术与工具,推动数据开发流程优化与处理性能提升;

任职要求:
1.计算机相关专业背景,具备5年以上数据仓库开发与实施经验,熟悉主流大数据技术栈;
2.熟悉Mysql、Hbase、Hive、Doris、ClickHouse、ES等存储系统的架构特点,能结合业务场景合理选择技术方案;
3.精通Hadoop、Spark、Flink、Kafka等大数据框架,具备海量数据处理实战能力;熟练使用DataWorks、kettle等ETL工具;
4.具备离线数仓(湖)与实时数仓(湖)的架构设计能力,并有成功落地的实际项目经验(必需);
5.熟悉Iceberg框架,具备实际开发与应用经验;
6.精通至少一门编程语言,如Java、Python;
2026-07-01 12:49
IP属地:上海

职位福利

本科5-10年ERP要求数据开发经验Spark原理/源码ScalaFlink原理/源码实时数仓开发经验数据平台开发经验财务SQLHive供应链业财一体化Hive原理/源码MESSpark
企业发布信息图
北京玲珑塔科技有限公司
未融资 · 100-499人
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >
下载鱼泡直聘APP

附近适合您的职位

大数据开发
2-3万元/月
兼职数据开发Hadoop3-5年本科非外包类要求数据开发经验ETL开发经验实时数仓开发经验数据建模经验计算机相关专业数据平台开发经验数据仓库开发经验大数据引擎开发经验JavaPythonScalaSparkHiveFlinkKafkaFlumeSpark原理/源码Flink原理/源码Hive原理/源码HBase原理/源码Kafka原理/源码MySQL原理/源码PostgreSQL原理/源码
上海 浦东新区 唐镇
数据开发-具备金融领域经验
1.1-1.3万元/月
数据开发1-3年本科JavaClickhouse原理/源码要求数据开发经验Spark原理/源码ETL开发经验大数据引擎开发经验KafkaMySQL/SQL Server计算机相关专业数据平台开发经验
上海 浦东新区
大数据开发工程师
1.1-1.4万元/月
数据开发1-3年本科Java要求数据开发经验Spark数据平台开发经验金融行业经验
上海 浦东新区
数据开发工程师
1.2-1.6万元/月
数据开发3-5年本科要求数据开发经验ETL开发经验证券实时数仓开发经验数据平台开发经验Flink金融行业经验SQLHBaseHiveBI报表开发经验Spark数据仓库开发经验基金
上海 浦东新区
大数据开发工程师-具备投研及证券估值背景者优先
1.4-2万元/月
数据开发3-5年本科Java要求数据开发经验ETL开发经验大数据引擎开发经验计算机相关专业数据平台开发经验金融行业经验HBaseHBase原理/源码HiveElasticsearchHive原理/源
上海 浦东新区
数据开发工程师/BI方向
9000-13000元/月
数据开发1-3年本科Hive要求数据开发经验BI报表开发经验MySQL/SQL Server非外包类Spark数据仓库开发经验OraclePythonSQL
上海 浦东新区
大数据开发
1.4-1.6万元/月
数据开发5-10年本科Java要求数据开发经验Hive原理/源码大数据引擎开发经验实时数仓开发经验数据治理经验SQL
上海 浦东新区
数据开发
1.5-1.8万元/月
数据开发5-10年本科要求数据开发经验ETL开发经验证券MySQL/SQL Server非外包类数据平台开发经验金融行业经验SQLHive债权业务数据仓库开发经验OraclePython
上海 浦东新区
数据开发
1.2-1.7万元/月
数据开发3-5年本科Java要求数据开发经验Kafkaai数据仓库开发经验Flink金融行业经验GaussDBSQL
上海 浦东新区
数据开发岗位
1.5-2.5万元/月
数据开发5-10年本科
上海 浦东新区