职位详情
职位描述:
1、需求对接与方案设计:与客户沟通数据相关需求,深入理解业务场景,并输出匹配的技术解决方案;
2、负责大数据平台中的数据清洗、预处理、转换及集成任务,保障数据的准确性与可用性;
3、基于Spark、Kafka、Hive等技术体系构建、优化和维护数据处理流程;
4、撰写技术手册、开发文档以及数据流转说明,推动团队知识积累与项目顺利交付;
5、参与数据架构规划,协同提升平台的稳定性、可扩展性及处理性能。
职位要求:
1、具备3年以上大数据处理工作经验,有数据治理项目经历或处理日均TB级数据者优先;
2、精通Spark(Spark SQL、Spark Streaming)进行大规模数据计算,具备性能调优实践者更佳;
3、熟悉Kafka消息中间件及实时流数据处理机制,掌握Hive等数据仓库组件的使用与调优;
4、具有扎实的ETL开发能力,熟练应对各类常见数据质量问题;
5、具备良好沟通协调能力,能准确理解客户需求并转化为可行的技术实现路径;
6、有编写技术文档的习惯,可独立完成模块设计文档、操作指南等相关材料。
1、需求对接与方案设计:与客户沟通数据相关需求,深入理解业务场景,并输出匹配的技术解决方案;
2、负责大数据平台中的数据清洗、预处理、转换及集成任务,保障数据的准确性与可用性;
3、基于Spark、Kafka、Hive等技术体系构建、优化和维护数据处理流程;
4、撰写技术手册、开发文档以及数据流转说明,推动团队知识积累与项目顺利交付;
5、参与数据架构规划,协同提升平台的稳定性、可扩展性及处理性能。
职位要求:
1、具备3年以上大数据处理工作经验,有数据治理项目经历或处理日均TB级数据者优先;
2、精通Spark(Spark SQL、Spark Streaming)进行大规模数据计算,具备性能调优实践者更佳;
3、熟悉Kafka消息中间件及实时流数据处理机制,掌握Hive等数据仓库组件的使用与调优;
4、具有扎实的ETL开发能力,熟练应对各类常见数据质量问题;
5、具备良好沟通协调能力,能准确理解客户需求并转化为可行的技术实现路径;
6、有编写技术文档的习惯,可独立完成模块设计文档、操作指南等相关材料。
2026-08-20 12:19
IP属地:北京
职位福利
大专3-5年实时数据开发数据清洗ETL离线数据开发

亿维融智软件科技(北京)有限公司
B轮 · 20-99人

工作地址

鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
1-1.2万元/月
数据开发1年以下本科ETL数据仓库数据建模JavaPythonScalaHadoopSpark大数据平台运维业务数据支撑跨团队协作
北京 海淀区
1.5-2.2万元/月
数据开发3-5年本科要求数据开发经验Spark原理/源码Flink原理/源码数据建模经验KafkaMySQL/SQL Server实时数仓开发经验FlinkHive原理/源码数据仓库开发经验Postg
北京 海淀区
1.6-2.1万元/月
数据开发3-5年本科Java要求数据开发经验ETL开发经验数据建模经验Hadoop实时数仓开发经验Oracle原理/源码计算机相关专业数据平台开发经验Flink金融行业经验SQL数据库内核开发经验
北京 海淀区
1.5-1.6万元/月
数据开发3-5年本科要求数据开发经验ETL开发经验BI报表开发经验MySQL/SQL Server数据平台开发经验OracleSQL
北京 海淀区
1.5-2.5万元/月
数据开发3-5年本科要求数据开发经验ElasticsearchClickhouseBI报表开发经验非外包类数据平台开发经验Python
北京 海淀区









