职位详情
任职要求:
1、具备JAVA开发基础,拥有2~4年大数据开发相关经验,熟悉大数据平台的基本运作流程。
2、熟练掌握 Spark SQL,理解 Spark 内部机制,可独立完成数据任务的开发与实施。
3、能够定位并解决常见运行问题,如数据倾斜、Job执行缓慢、Join效率优化等。
4、熟悉数据仓库与指标平台的设计思路,有接口设计实践经验者优先考虑。
5、掌握Java/Python语言,具备扎实的SQL能力,能手动编写复杂SQL用于数据验证及性能分析。
6、了解 ClickHouse/Doris 等 OLAP 引擎的常规使用场景者优先。
岗位职责:
1、负责大数据分析平台中 Spark 任务的开发工作,支撑自助取数、即席查询及多维度指标计算等数据需求。
2、封装 Spark 对外服务接口,供 Java 低代码平台集成调用。
3、基于数据仓库或数据湖架构,开展数据模型设计及指标逻辑的开发与日常维护。
4、诊断并处理 Spark 作业运行中的典型问题,包括数据倾斜、执行延迟、任务异常中断等。
5、撰写相关技术文档,包括开发说明、接口定义及运维操作指南。
1、具备JAVA开发基础,拥有2~4年大数据开发相关经验,熟悉大数据平台的基本运作流程。
2、熟练掌握 Spark SQL,理解 Spark 内部机制,可独立完成数据任务的开发与实施。
3、能够定位并解决常见运行问题,如数据倾斜、Job执行缓慢、Join效率优化等。
4、熟悉数据仓库与指标平台的设计思路,有接口设计实践经验者优先考虑。
5、掌握Java/Python语言,具备扎实的SQL能力,能手动编写复杂SQL用于数据验证及性能分析。
6、了解 ClickHouse/Doris 等 OLAP 引擎的常规使用场景者优先。
岗位职责:
1、负责大数据分析平台中 Spark 任务的开发工作,支撑自助取数、即席查询及多维度指标计算等数据需求。
2、封装 Spark 对外服务接口,供 Java 低代码平台集成调用。
3、基于数据仓库或数据湖架构,开展数据模型设计及指标逻辑的开发与日常维护。
4、诊断并处理 Spark 作业运行中的典型问题,包括数据倾斜、执行延迟、任务异常中断等。
5、撰写相关技术文档,包括开发说明、接口定义及运维操作指南。
2026-08-06 12:57
IP属地:北京
职位福利
本科3-5年SparkSqlJava

北京源于信科技有限公司
未融资 · 100-499人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
数据开发
1.8-2.2万元/月
数据开发3-5年本科Java要求数据开发经验Spark原理/源码ETL开发经验大数据引擎开发经验Flink原理/源码数据平台开发经验FlinkHiveHive原理/源码BI报表开发经验Spark数
北京 东城区
数据开发工程师(现场派驻)
1.6-2万元/月
数据开发3-5年本科HiveShell要求数据开发经验ETL开发经验大数据引擎开发经验Kafka其他Spark数据平台开发经验数据仓库开发经验Python
北京 东城区
大数据仓储开发工程师
1.3-1.9万元/月
数据开发3-5年本科JavaHive要求数据开发经验数据建模经验实时数仓开发经验计算机相关专业Spark数据仓库开发经验Flink金融行业经验Python
北京 东城区
【26届校招】A2-大数据平台开发工程师
1.5-2.5万元/月
数据开发经验不限硕士JavaHive要求数据开发经验Kafka实时数仓开发经验非外包类Spark数据平台开发经验
北京 东城区
【26届校招】A2-大数据平台开发工程师
1.5-2.5万元/月
数据开发经验不限硕士JavaHive要求数据开发经验Kafka实时数仓开发经验非外包类Spark数据平台开发经验
北京 东城区









