职位详情
任职要求:
1、具备JAVA开发基础,拥有2~4年大数据开发相关经验,熟悉大数据平台的基本运作流程。
2、熟练掌握 Spark SQL,理解 Spark 内部机制,可独立完成数据任务的开发与实施。
3、能够定位并解决常见运行问题,如数据倾斜、Job执行缓慢、Join效率优化等。
4、熟悉数据仓库与指标平台的设计思路,有接口设计实践经验者优先考虑。
5、掌握Java/Python语言,具备扎实的SQL能力,能手动编写复杂SQL用于数据验证及性能分析。
6、了解 ClickHouse/Doris 等 OLAP 引擎的常规使用场景者优先。
岗位职责:
1、负责大数据分析平台中 Spark 任务的开发工作,支撑自助取数、即席查询及多维度指标计算等数据需求。
2、封装 Spark 对外服务接口,供 Java 低代码平台集成调用。
3、基于数据仓库或数据湖架构,开展数据模型设计及指标逻辑的开发与日常维护。
4、诊断并处理 Spark 作业运行中的典型问题,包括数据倾斜、执行延迟、任务异常中断等。
5、撰写相关技术文档,包括开发说明、接口定义及运维操作指南。
1、具备JAVA开发基础,拥有2~4年大数据开发相关经验,熟悉大数据平台的基本运作流程。
2、熟练掌握 Spark SQL,理解 Spark 内部机制,可独立完成数据任务的开发与实施。
3、能够定位并解决常见运行问题,如数据倾斜、Job执行缓慢、Join效率优化等。
4、熟悉数据仓库与指标平台的设计思路,有接口设计实践经验者优先考虑。
5、掌握Java/Python语言,具备扎实的SQL能力,能手动编写复杂SQL用于数据验证及性能分析。
6、了解 ClickHouse/Doris 等 OLAP 引擎的常规使用场景者优先。
岗位职责:
1、负责大数据分析平台中 Spark 任务的开发工作,支撑自助取数、即席查询及多维度指标计算等数据需求。
2、封装 Spark 对外服务接口,供 Java 低代码平台集成调用。
3、基于数据仓库或数据湖架构,开展数据模型设计及指标逻辑的开发与日常维护。
4、诊断并处理 Spark 作业运行中的典型问题,包括数据倾斜、执行延迟、任务异常中断等。
5、撰写相关技术文档,包括开发说明、接口定义及运维操作指南。
2026-06-16 12:24
IP属地:北京
职位福利
本科3-5年SparkSqlJava

北京源于信科技有限公司
未融资 · 100-499人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
数据开发(具备金融行业经验)
1.5-1.9万元/月
数据开发5-10年本科要求数据开发经验PostgreSQLHadoopMySQL/SQL Server实时数仓开发经验计算机相关专业数据平台开发经验金融行业经验SQLShellperl数据仓库开发经验
北京 东城区
大数据开发工程师
1.5-2万元/月
数据开发5-10年本科flinkJava要求数据开发经验Kafka原理/源码Hive原理/源码Spark原理/源码大数据引擎开发经验Flink原理/源码实时数仓开发经验金融行业经验Pythonfink
北京 东城区
大数据开发基金背景本科5年朝阳门
1.7-1.9万元/月
数据开发5-10年本科JavaHive要求数据开发经验数据建模经验HadoopBI报表开发经验计算机相关专业数据平台开发经验基金金融行业经验Python
北京 东城区
数据开发工程师
1.5-2万元/月
数据开发3-5年本科要求数据开发经验PostgreSQLETL开发经验数据建模经验MySQL/SQL Server数据平台开发经验Flink数据治理经验SQLShellSpark数据仓库开发经验O
北京 东城区









