基于绿色存储的数据资源中心应该如何建设

万方数据 严庄 发表于:10年07月05日 11:39 [转载] 睿商在线

  • 分享:
[导读]在这种背景下,以"节能、环保、高效、经济"为核心价值的绿色浪潮正席卷整个IT产业,绿色IT已成为符合社会进步与环境保护要求、满足经济可持续性发展目标的新产业,绿色存储则是引领IT产业下一代革命的创新驱动力。
2.4重复数据删除技术(Data Deduplication)

为了确保业务的连续、用户的稳定,对关键数据进行备份是必不可少的,在每一个数据资源中心,日复一日的备份操作会产生大量的冗余数据,占用大量的存储空间,基于此,一种新的数据管理方式一重复数据删除技术应运而生了。该技术针对不同的存储介质、不同的操作平台,引用一种基于数据块、可以人为控制数据空间的方式来删除冗余数据,只为相同的数据保留一份副本,其他被删除的重复数据将由一个指向元数据的的指针所代替,可以大幅度地节省存储空间。

重复数据删除可以对文件、数据块或者字节级进行操作。实现重复数据删除的方式主要有两种:第一种在数据写入磁盘之前进行判断,发现重复数据便以指针代替,称为实时处理(in-line),优点是所需磁盘空间较少。缺点是对CPU处理能力要求高;第二种在数据写入磁盘之后才启动去重过程,即所谓的后处理(post-processing),优点是对CPU处理能力要求不是很高,缺点是必须保留较大的磁盘空间作为临时工作区。不论采用哪种方式。通过重复数据删除都可以极大地优化存储系统,减少数据量,从而降低能耗以及减少产生的热量。

2.5 分级存储(Hierarchical Storage Management)

事实上,任何一种数字文献资源都具有生命周期。在数据刚生成的一段时间内,访问频率最高,为读者带来的使用价值也最高;随着时间的推移,访问频率降低,数据的价值也随之下降,低访问频率的数据量远远超过高访问频率的数据量。不同生命周期的数据是提供给不同使用对象的,这种以最低的成本获得最高使用价值的方式,就是对数据进行分级存储。信息生命周期管理(ILM)是实施分级存储的理论基础,它根据业务数据重要性和数据优先级进行数据分类,以此确定相应的数据所需要的存储系统,进而提高整个系统的安全级别,做到重要数据重点保护,对关键业务、关键数据实施容灾保护。同时,通过数据分类,区分出在线数据、近线数据和离线数据,把在线数据存放在快速的FC/SAS磁盘驱动器上,近线数据存放在相对较慢的SATA磁盘驱动器上,而将离线数据转移到磁带存储离线保存。

以高等学校图书馆为例,其数字资源既包括购买的商业数据库、共建的专用数据库以及自建的特色数据库等,数字资源拥有量小的数T,多的数十T甚至上百T。如果将所有的数据都储存在昂贵的磁盘中,并全部提供365*24小时服务,将会极大地增加运行和维护成本。如果根据分级存储理论,将不经常访问的数据按指定的策略自动迁移到存储层次中较低的层次,释放出较高成本的存储空间给更频繁访问的数据,就可以获得较好的总体性价比,达到节能降耗、降低运行维护成本的目标。

3、实现数据资源中心绿色存储的设备评价与选用标准

选用具备绿色功能的存储设备是实现绿色存储的基础。是实现数据资源中心节能降耗的重要组成部分。在选择存储设备时,应选用遵从环保法规规范 CEEUP(用能产品生态设计框架指令)和ROILS(电子电气设备中限制使用有毒有害物质指令)的产品;同时选用该类设备可以参考Sun公司制订的有关下一代Internet服务器的评价标准,即SWaP(Space,Watts and Performance。空间、瓦特和性能)标准。该标准从设备占用的空间、消耗的电力、最终提供的服务性能3个维度给出了一个简单的评测计算公式,既 SWAP=P/(s*w)。其中P为基准性能测试工具获得的测试值,s为设备在数据中心机架中占用的高度,w为服务器在基准测试时的功耗。这个比值越大,说明该服务器或存储设备的综合指标越好,越能满足节能环保的数据资源中心建设需要。

4、结束语

绿色存储不仅是IT产品供应商的责任,也是终端用户的责任,每一个用户必须意识到自己既是绿色存储的驱动者又是绿色存储的实践者,有责任有义务为节能减排保护环境作贡献。图书馆是存储应用的大客户,在建设数字图书馆的进程中,应该自觉采用多种绿色存储技术和存储策略相结合的数据存储方式。以节能环保为己任,以绿色存储为起点,选用具备绿色功能的存储设备,建设节能环保的绿色数据资源中心。
[责任编辑:李旭阳]
lxy
3月31日,硬盘厂商希捷同中国家电厂商海信在北京联合宣布了战略合作关系。两家厂商表示,将共同推动SATA通用存储模块(USM)规范在中国市场的应用。
官方微信
weixin
精彩专题更多
华为OceanStor V3系列存储系统是面向企业级应用的新一代统一存储产品。在功能、性能、效率、可靠性和易用性上都达到业界领先水平,很好的满足了大型数据库OLTP/OLAP、文件共享、云计算等各种应用下的数据存储需求。
12月15日,中国闪存联盟成立,同时IBM Flash System卓越中心正式启动
DOIT、DOSTOR、易会移动客户端播报中国存储峰会盛况。
 

公司简介 | 媒体优势 | 广告服务 | 客户寄语 | DOIT历程 | 诚聘英才 | 联系我们 | 会员注册 | 订阅中心

Copyright © 2013 DOIT Media, All rights Reserved.