海淀区
职位详情
职位描述：
1、需求沟通与方案制定：与客户深入交流数据需求，理解实际业务场景，并输出匹配的技术解决思路；
2、承担大数据平台中的数据清洗、预处理、转换及整合任务，保障数据的准确性与可用性；
3、基于Spark、Kafka、Hive等核心技术构建、优化和维护数据处理流程；
4、撰写技术手册、开发文档以及数据流转说明，推动团队知识积累与项目顺利交付；
5、参与数据体系架构规划，协同提升平台稳定性、可扩展性及运算效率。
职位要求：
1、具备3年以上大数据处理相关工作经验，有数据治理实践或日均TB级数据处理背景者优先；
2、精通Spark（Spark SQL、Spark Streaming）进行海量数据处理，具有性能调优经验者更佳；
3、熟悉Kafka消息中间件及实时数据流处理机制，掌握Hive等数仓工具的使用与调优方法；
4、具备扎实的ETL开发能力，熟悉常见数据清洗逻辑与质量问题应对策略；
5、具备良好沟通协作能力，能准确把握客户需求并转化为可行的技术实施方案；
6、有良好的文档编写习惯，可独立完成模块设计文档、操作指南等材料的编制工作。
1、需求沟通与方案制定：与客户深入交流数据需求，理解实际业务场景，并输出匹配的技术解决思路；
2、承担大数据平台中的数据清洗、预处理、转换及整合任务，保障数据的准确性与可用性；
3、基于Spark、Kafka、Hive等核心技术构建、优化和维护数据处理流程；
4、撰写技术手册、开发文档以及数据流转说明，推动团队知识积累与项目顺利交付；
5、参与数据体系架构规划，协同提升平台稳定性、可扩展性及运算效率。
职位要求：
1、具备3年以上大数据处理相关工作经验，有数据治理实践或日均TB级数据处理背景者优先；
2、精通Spark（Spark SQL、Spark Streaming）进行海量数据处理，具有性能调优经验者更佳；
3、熟悉Kafka消息中间件及实时数据流处理机制，掌握Hive等数仓工具的使用与调优方法；
4、具备扎实的ETL开发能力，熟悉常见数据清洗逻辑与质量问题应对策略；
5、具备良好沟通协作能力，能准确把握客户需求并转化为可行的技术实施方案；
6、有良好的文档编写习惯，可独立完成模块设计文档、操作指南等材料的编制工作。
2026-07-21 12:42
IP属地：北京
职位福利
大专3-5年数据治理数据库开发SparkKafka
亿维融智软件科技(北京)有限公司
B轮 · 20-99人
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
