您现在的位置是:首页 > IT基础架构 > 计算存储 >
自动精简配置技术的昨天、今天与明天
2008-11-21 18:47:00作者:Sino-ESG 王从来源:
摘要自动精简配置技术从三年前只是3PAR在市场推广,到今天大大小小的存储厂商都在纷纷推出自动精简配置产品。在短短的时间内,精简配置得到了如此蓬勃的发展,供应商所推出的产品让人目不暇接。而绿色节能理念更是加速了市场对自动精简配置技术的接受程度,同时也提升了这一技术...
自动精简配置技术从三年前只是3PAR在市场推广,到今天大大小小的存储厂商都在纷纷推出自动精简配置产品。在短短的时间内,精简配置得到了如此蓬勃的发展,供应商所推出的产品让人目不暇接。而绿色节能理念更是加速了市场对自动精简配置技术的接受程度,同时也提升了这一技术的热度。这里我们浅析精简配置技术的来龙去脉:
精简配置由来
传统配置技术是给每个应用配置充足的容量,配置容量往往得不到充分利用。因此,存储资源利用率的水平非常低。根据《存储杂志》统计,平均只有18.6%的存储资源得以利用。管理员为了避免重新配置可能造成的业务中断,常常会过度配置容量。在这种情况下,一旦存储分配给某个应用,就不可能重新分配给另一个应用。由此就造成了已分配的容量没有得到充分利用,这种闲置导致了资源的极大浪费,同时也是成本的浪费。
精简配置技术正是为了改变这一存储资源浪费问题而诞生的。带给用户的益处就是,精简配置可大大提高存储资源利用率,提高配置管理效率,实现高自动化的优化数据存储。
在精简配置技术的基本理念是一组主机或者应用对容量的需求随时间而发生改变,分配的容量在初始阶段不能得到充分的利用。精简配置技术可以为不同应用提供一个公用的单一预留容量池。同时,通过创建比物理容量大的逻辑卷,让存储管理员给应用或主机配置超出系统物理容量的存储容量,这一反以往根据配置锁定物理容量的情况。利用精简配置技术,一个逻辑“软”预留,在不消耗实际物理容量的前提下,服务器认为它是拥有全配置容量的。管理员按照应用写入的数据预留物理容量,而不是根据应用的设定,这样就大大提高存储利用率。
使用精简配置技术,用户存储资源使用率可以成倍增加,与此同时,管理难度和成本却大大下降。更重要的是,能大大降低数据中心空间占用率、动力和制冷能耗。
精简配置已被企业级用户广泛采用,来提高系统利用率、降低运作成本。目前新的经济环境下, IT预算紧缩、数据量持续快速增长这种宏观经济的走势,将会加快中端市场对精简配置技术的接受能力。
考虑到与精简配置技术有关的潜在风险,精简配置能够提供必要的警示、警告以及限制使精简配置技术使用安全和易于管理变得非常重要。例如,存储管理员可以设定“门槛值”,提示存储管理员增加物理容量。
精简配置技术的应用
精简配置是云计算的一个核心技术:从概念上来讲,云计算是外部B2B或B2C服务供应商在因特网上提供的服务化企业IT。云计算是通过超链接分发的服务化软件或服务化硬件。它是基于因特网的分发系统,由此方式而得出“云计算”这一名词。
为了有效支持云计算,基础架构必须支持几个关键特征。首先,这些系统必须是自治的,也就是说,它们必须内嵌有自动化技术,消除人工部署和管理任务,允许平台自己智能地响应应用的要求。如果系统需要人为干预来分配和管理资源,那么它就不能充分地解决云计算的要求。其次,云计算架构必须是敏捷的,能够对需求信号或变化的工作负载作出迅疾的反应。换句话说,内嵌的虚拟化技术和集群化技术,能应付增长或服务级要求的快速变化。如果系统需要花几个小时、几天或几个星期的时间来响应新的应用或用户需求,那么这个系统也就不能满足云计算的要求了。
云计算的市场范围也非常广泛——集成软件、服务器容量、存储、中间件、虚拟化技术、安全以及管理功能都作为服务提供给用户,云计算厂商成功地利用了SaaS服务、网格计算、虚拟化、同不定位、外包、Web托管以及3G无线网络的普及,这使他们实现了让用户从任何角落、任何时间都可以访问到企业应用。 与此同时,云计算也面临着商业模式的巨大挑战。人们可能无法接受将含有个人隐私信息的数据存储在别人的硬盘或者服务器上。而现在无论是EMC还是别的厂家都还没有拿出足够令人信服的、可以保护并管理千百万人数据安全的技术。
同时,精简配置也是公用计算的核心技术:公用计算可以让IT组织通过服务器和存储虚拟化来提供服务化软件(Software as a Service)和服务化硬件(Hardware as a Service)。在公用计算平台上,企业可实现公用服务、云计算和新一代的基于服务导向架构的应用。
所谓公用运算,或按需运算,其想法就是由IT公司给企业或个人提供充沛的计算能力和存储容量,而这些计算能力和存储容量可以用于任何应用并随时得到重新分配,并按使用付费。这些计算任务会在远程的数据中心完成,并通过网络传输计算力。这样,人们可以像用水、用电一样,按自己的需要购买和使用计算机资源,不仅优化了服务器和存储设备的利用率,更可以大大节省成本。也就是说,我们可以像使用电源插座一样来使用计算力,而不需要担心计算性能的管理和运行问题。
公用计算还和通常的技术革新不同之处还在于,它不需要对已有的硬件、软件和系统结构进行重大调整,而只是在计算机系统中加入更多的自动化技术和服务,这也是公用计算颇为吸引人的亮点。目前与此相关的一些核心技术,如Web服务、网格计算、存储虚拟化、适应性管理以及安全等等方面还都在不断地演进和融合着。其中,Web服务和网格是实现公用计算最重要的两大技术。我们可以看到,全球的IT巨头甚至各国对超级计算机所倾注的热情在很大程度上就来自于各国国家网格乃至全球网格的构建需求,因为超级计算机无疑将是网格中发挥核心作用的节点。
Web 2.0加快了数据增长的速度,精简配置可以大大降低Web2.0存储成本 : 随着Web 2.0用户所创造的越来越多的丰富应用,文件、影像、照片、音乐等信息可在全球范围共享。Web 2.0的应用对存储提出了新的需求。而传统的存储技术,如SAN、NAS、IP SAN等却无法满足Web2.0的应用需求,因为传统存储不具灵活性、敏捷性和弹性、自我管理性。而web2.0 的应用数据包括两种形式:(1) 存储在相关数据库的用户资料数据(如Microsoft SQL Server或 Oracle Database ),(2) 作为非结构数据存储的固定内容(如音乐、照片、视频)。第一种形式要求非常高的(业务的)性能来潜在支持数以百万计同时在线的用户。第二种形式需要低成本的容量以及良好的连续性能。使用传统存储架构,这些负载必须在单独的阵列中运行。如果每一项工作负载使用单独阵列,几个PB的存储可能需要数十或甚至数百传统阵列。因此Web 2.0 具有多项传统存储所不具备的优势:自我管理性;统一阵列内可处理连续的工作负载;单个阵列容量可扩展至几百TB,仍可用最少的人员来管理基础设施;支持多个存储层数据,包括需要FC 磁盘的高性能级别的数据以及存储在低成本的SATA磁盘上的固定内容;轻松、迅速应对无法预测的业务增长和应用需求的变化。
而Web 2.0 的基础架构是公用计算,主要包括1)“公用”存储和2)服务器虚拟化。还包括块数据存储作为公用服务。因此,由精简配置技术做支撑的公用存储不仅仅只适合于Web 2.0,还可作为软件服务和硬件服务。公用存储还是大中型企业部署公用数据中心的理想方案,因为这些企业的IT 部门都希望能够将企业IT 作为一项公用服务,提供给内部部门或者用于业务线中。
精简配置技术最新动向
早些时候,精简配置技术已经得到比较广泛的应用,主要用来解决效率低下和成本问题,这些客户通常在部署新技术前都进行了充分的评估。随着精简配置的概念被人们广为接受,越来越多的企业会倾向于来采用该技术。
调查数据表明,许多用户都不是很了解精简配置,他们只知道他们的网络存储环境管理越来越复杂,存储容量需求日益飙升,采用增加磁盘的方式却只是治标不治本,并且还造成成本、能源等费用的大幅上升。但是,他们却从来未考虑以精简配置来解决这些问题。
而目前市场上,精简配置技术仍在持续的演变和革新,下面两个最新推出的精简配置概念,已经大大吸引了市场的瞩目。
精简配置之类的虚拟技术,正快速成为提高虚拟化数据中心效率的必备特征。而自动化的“臃肿”到“精简”的卷管理技术,则是精简技术嵌入硬件的创新,将提高企业组织的效率带来非常积极的影响,这种技术,能以最高的速度将其他存储平台传统的“臃肿”容量转换为 “精简”容量,同时还不会中断基于软件的实施。由于卷转换的容量精简在硬件级别上进行,因此可实现更多的并行内存交易处理,系统性能也不会象使用基于软件的卷优化方法那样受到影响。在实现卷转换的容量精简的同时,还能够保持系统超高的性能水平。容量精简能将传统卷中的被分配但未被使用的空间移除,从而提高容量的利用率。这种简单快速的存储优化方式,不仅解决存储空间利用率不足的问题,还通过减少容量、能源和占地空间需求,减轻了存储对环境的影响。
空间回收技术 :配置空间不能得到利用,导致大量闲置容量,造成磁盘利用率低下。第一代精简配置通过逻辑卷,提高容量利用率。但仍然存在着配置后容量不能回收再利用的问题。新一代精简配置技术已经迅速成为应对低效磁盘的必备措施, 配置数据空间回收技术则可消除文件系统格式、消耗和删除对存储容量优化的影响。当文件系统内发生文件删除和更改时,文件系统可定期通报数据自由块的位置。由此,利用小的文件系统级信息自动回收精简配置虚拟卷中未使用的空间,在不影响主机应用的情况下维持高容量利用率,不仅 可大幅削减IT开支,数据写入容量提高75%甚至更多,以更少的付出获得更多的回报,这种创新技术,进一步拓展了精简配置生态系统,持续优化文件容量利用率。
总之,各种新技术的出现,都是以如何在精简的基础上持续精简来进行的,而能够贴合实际需求、解决用户的难题并为用户带来更多经济和技术好处的精简技术势必成为人们的首选。
(本文不涉密)
责任编辑: