职位详情
职位描述:
1、需求对接与方案设计:与客户沟通数据相关需求,深入理解业务场景,并输出匹配的技术解决方案;
2、负责大数据平台中的数据清洗、预处理、转换及集成任务,保障数据的准确性与可用性;
3、基于Spark、Kafka、Hive等技术体系构建、优化和维护数据处理流程;
4、撰写技术手册、开发文档以及数据流转说明,推动团队知识积累与项目顺利交付;
5、参与数据架构规划,协同提升平台的稳定性、可扩展性及处理性能。
职位要求:
1、具备3年以上大数据处理工作经验,有数据治理项目经历或处理日均TB级数据者优先;
2、精通Spark(Spark SQL、Spark Streaming)进行大规模数据计算,具备性能调优实践者更佳;
3、熟悉Kafka消息中间件及实时流数据处理机制,掌握Hive等数据仓库组件的使用与调优;
4、具有扎实的ETL开发能力,熟练应对各类常见数据质量问题;
5、具备良好沟通协调能力,能准确理解客户需求并转化为可行的技术实现路径;
6、有编写技术文档的习惯,可独立完成模块设计文档、操作指南等相关材料。
1、需求对接与方案设计:与客户沟通数据相关需求,深入理解业务场景,并输出匹配的技术解决方案;
2、负责大数据平台中的数据清洗、预处理、转换及集成任务,保障数据的准确性与可用性;
3、基于Spark、Kafka、Hive等技术体系构建、优化和维护数据处理流程;
4、撰写技术手册、开发文档以及数据流转说明,推动团队知识积累与项目顺利交付;
5、参与数据架构规划,协同提升平台的稳定性、可扩展性及处理性能。
职位要求:
1、具备3年以上大数据处理工作经验,有数据治理项目经历或处理日均TB级数据者优先;
2、精通Spark(Spark SQL、Spark Streaming)进行大规模数据计算,具备性能调优实践者更佳;
3、熟悉Kafka消息中间件及实时流数据处理机制,掌握Hive等数据仓库组件的使用与调优;
4、具有扎实的ETL开发能力,熟练应对各类常见数据质量问题;
5、具备良好沟通协调能力,能准确理解客户需求并转化为可行的技术实现路径;
6、有编写技术文档的习惯,可独立完成模块设计文档、操作指南等相关材料。
2026-06-21 13:34
IP属地:北京
职位福利
大专3-5年实时数据开发数据清洗ETL离线数据开发

亿维融智软件科技(北京)有限公司
B轮 · 20-99人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
大数据开发工程师
1.2-1.7万元/月
数据开发3-5年本科Hive要求数据开发经验银行Sparkhadoop数据平台开发经验数据仓库开发经验Flink金融行业经验SQL
北京 海淀区
大数据开发工程师(长期岗位)
1.2-1.5万元/月
数据开发3-5年大专JavaHive要求数据开发经验ETL开发经验KafkaSpark数据平台开发经验数据仓库开发经验
北京 海淀区
数据开发
1.4-1.7万元/月
数据开发5-10年大专要求数据开发经验Spark原理/源码ETL开发经验大数据引擎开发经验Kafka实时数仓开发经验数据平台开发经验FlinkHBaseHiveBI报表开发经验Spark数据仓库开发
北京 海淀区
数据开发工程师
1-1.4万元/月
数据开发3-5年本科Shell要求数据开发经验PostgreSQL金融工作经验MySQL/SQL ServerBI报表开发经验计算机相关专业数据仓库开发经验Oracle金融行业经验SQL
北京 海淀区
数据开发工程师
1.5-1.8万元/月
数据开发3-5年本科物流/供应链项目数据库内核开发经验JavaPL/SQL要求数据开发经验AI项目经验项目管理经验Oracle原理/源码计算机相关专业SQLPython
北京 海淀区
数据开发-锐捷
1.4-1.5万元/月
数据开发3-5年本科数据库内核开发经验MySQL原理/源码要求数据开发经验ETL开发经验其他数据开发经验其他Spark数据平台开发经验数据仓库开发经验
北京 海淀区
Sqlserver开发
1.5-2万元/月
数据开发3-5年本科Java要求数据开发经验MySQL/SQL Server电商/零售行业经验制造业行业经验数据平台开发经验Sqlserver开发SQL
北京 海淀区









