虹口区
职位详情
岗位职责：
1.集群管理：负责Hadoop集群的部署、配置、日常维护及性能优化，保障系统运行的高可用与稳定。
2.性能调优：持续监控集群运行状态，针对性地进行参数调整和资源配置优化，提升数据处理效率与资源使用率。
3.故障排查：及时响应系统异常，快速定位故障根源并执行有效修复措施，减少业务影响时间。
4.安全管理：构建并完善集群安全策略，落实数据保护机制，防范非法访问与数据泄露风险。
5.技术选型：结合实际业务场景，评估并引入适配的Hadoop生态组件及相关技术方案。
6.项目支持：为业务部门提供专业技术支撑，参与需求研讨，协同设计高效的数据处理架构。
7.文档编写：整理输出各类技术文档，包括操作说明、问题处理流程等，促进团队知识沉淀与共享。
任职要求：
1.教育背景：计算机科学或相关专业本科及以上学历。
2.经验要求：具备3年以上大数据平台运维实践经验，熟悉Hadoop生态系统运作。
3.技术技能：精通Hadoop体系架构及其核心模块（如HDFS、YARN）；掌握Hadoop生态常用工具（如Kerberos、LDAP、Hive、Spark、Flink、Kyuubi、Kafka、HBase、ES等）；熟练使用Linux环境；具备Shell脚本编写能力；至少掌握Python、Java或Scala中的一种编程语言。
4.软技能：具备良好的沟通协作能力；能独立分析和解决复杂问题；保持对新兴技术的关注与学习热情。
5.加分项：有AmbariMpack开发经验，或拥有百台以上服务器规模、PB级数据量环境的运维经历。
1.集群管理：负责Hadoop集群的部署、配置、日常维护及性能优化，保障系统运行的高可用与稳定。
2.性能调优：持续监控集群运行状态，针对性地进行参数调整和资源配置优化，提升数据处理效率与资源使用率。
3.故障排查：及时响应系统异常，快速定位故障根源并执行有效修复措施，减少业务影响时间。
4.安全管理：构建并完善集群安全策略，落实数据保护机制，防范非法访问与数据泄露风险。
5.技术选型：结合实际业务场景，评估并引入适配的Hadoop生态组件及相关技术方案。
6.项目支持：为业务部门提供专业技术支撑，参与需求研讨，协同设计高效的数据处理架构。
7.文档编写：整理输出各类技术文档，包括操作说明、问题处理流程等，促进团队知识沉淀与共享。
任职要求：
1.教育背景：计算机科学或相关专业本科及以上学历。
2.经验要求：具备3年以上大数据平台运维实践经验，熟悉Hadoop生态系统运作。
3.技术技能：精通Hadoop体系架构及其核心模块（如HDFS、YARN）；掌握Hadoop生态常用工具（如Kerberos、LDAP、Hive、Spark、Flink、Kyuubi、Kafka、HBase、ES等）；熟练使用Linux环境；具备Shell脚本编写能力；至少掌握Python、Java或Scala中的一种编程语言。
4.软技能：具备良好的沟通协作能力；能独立分析和解决复杂问题；保持对新兴技术的关注与学习热情。
5.加分项：有AmbariMpack开发经验，或拥有百台以上服务器规模、PB级数据量环境的运维经历。
2026-05-22 15:05
IP属地：上海
职位福利
本科3-5年JavaAnsible/Salt/PuppetMySQL/Oracle大数据运维经验Python/ShellKubernetes
天翼支付科技有限公司
1000-9999人
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
