集群管理工具经得起考验吗?

  • 时间:
  • 浏览:10
  • 来源:众神智能 - 专注共享阿楠教学网分享

有效管理大规模集群对IT来说是个大挑战,尤其是面对大数据、大型比较复杂工作流,以及灵活操作等要求。

作者:作者:Mike Matchett 翻译:陈德文来源:TechTarget中国|2015-12-29 10:24

如今集群设计遍地还会 。最典型的例子包括软件定义存储、虚拟化架构、超级融合、公有云与私有云,以及众所周知的大数据。集群以横向扩展的最好的土办法来构建基础设施,使用商业产品,如服务器和JBOD。横向扩展的设计才能实现容量与性能递增,与大累积纵向扩展的基础架构相比,有着巨大的成本规模效益。

大集群肯能其支持大规模融合与整合,都里能 协助优化整体资本支出,而不断吸引业内目光。没人 为哪些地方大伙不把现在所有的IT基础设施都集群化呢?大规模集群管理和运维都相当比较复杂,尤其是在开始英语 将工作负载和租户结合后。肯能建造了另另一个大集群,就时要确保期能充分得到利用,也意味时要托管小量工作负载。一旦出先这俩 状况,IT时要搞清楚怎么才能 才能 合理的优先或公平分配资源。这从来还会 一件简单的事——实施、配置与优化管理共享集群架构的总运营成本,通常会高于部署全部独立或向上扩展产品的总成本。

当集群在虚拟化基础架构中,虚拟化管理守护应用应用程序负责加强共享、隔离吵闹的邻居、动态迁移和/或重新启动受影响,甚至一个劲飙升的工作负载,还扮演交警的角色。这几年大伙发现了该领域的长足进步,都里能 在虚拟机层面和虚拟存储卷级别(如VMware VVOL)上,动态执行用户指定的服务质量(QoS)。

当然,都里能 把基础架构云(如OpenStack)作为大型、优化管理集群资源作为整体思路。尽管没人 ,虚拟化和云基础架构平台时要数年时间才能心智成熟期期 图片 ,目前仍然不完美。在开发云管理工具的路上还有很长的路要走,要实现在专属设备上部署系统的比较复杂。之前 在虚拟化环境内,仍然难以确保虚拟机内的应用守护应用应用程序才能提供最终用户可靠的响应时间。

针对大数据的集群管理工具

有效的集群管理设计对大数据尤其重要,这关系到引入企业IT规模扩展的HPC技术。Hadoop、Spark和有些可扩展NoSQL工具旨在让每每其他人都实现分布式处置。然而,生产大数据应用守护应用应用程序目时要求应用守护应用应用程序性能的一致性。当大数据应用支撑着关键业务流程时,运营与性能的可靠性和稳定性将成为大问题。

在种类繁多的大数据工具如Hadoop集群,每个大数据作业都争夺相同的资源。到目前为止,有些有些Hadoop集群要是我简单处置小型单一的大数据处置流程或只对小累积用户服务,通常用于非生产环境的数据科学。但随着大数据集群移入生成环境,就意味它们时要承载更多的任务之前 服务多个租户——就如大型虚拟化或云集群。而当这俩 集群被共享,管理大数据将成为一大挑战。

一个劲想看 新的大数据集群管理和操作方案从不稀奇。集群管理工具一般分为几类。起步于高性能计算领域的Bright Computing公司,现在正协助企业从裸机上部署、配置与管理大型集群。

但真正的关键在于性能管理,秘诀在于了解还会 谁,以及在哪些地方之前 做哪些地方事。相当于 ,还有标准的工具都里能 从集群的日志文件(通常十分巨大)中生成报告。但随着日志的增长,这俩 最好的土办法的效果会降低。之前 当谈及运营性能,真正要做的实际上是优化混合租户与混合工作负载环境的QoS和运行时。类式,Pepperdata能生成实时运行视图,展示集群里正在处在哪些地方,之前 都里能 动态的控制和分配集群资源。原本都里能 保证优先级应用守护应用应用程序满足服务器级别协议,同时最小化集群基础设施的规模。

在更高的级别,大数据时要有每每其他人专属的应用守护应用应用程序性能管理守护应用应用程序。例子之一是Concurrent的Driven,都里能 跟踪和回溯应用守护应用应用程序执行轨迹,还都里能 直接监控业务流程和应用守护应用应用程序级的工作流,应用守护应用应用程序之间的内部管理依赖、运行时和失败。原本促使识别代码瓶颈,规划和修复工作流执行窗口,并协助数据管理。

随着横向扩展架构在数据中心内落地,集群管理工具的价值将增长——降低资源共享所需的资本支出,同时保障承诺性能和有些大数据处置业务的QoS。在有些状况下,IT没哪些地方地方地方集群专用工具协助,是肯能无法有效处置哪些地方地方大数据集群的。

总的来说,大伙认为大型集群管理这十年心智成熟期期 图片 的非常快,它借鉴了虚拟化管理来处置高优先级的生产工作负载。通过学习哪些地方地方虚拟化和云计算前辈,甚至都里能 取代大伙,产生另另一个更为全部的集群数据中心愿景。

【编辑推荐】

【责任编辑:

何妍

TEL:(010)684765006】



点赞 0