归档数字内容痛息数量的急剧增长与磁存储技术的不断发展是联系在一起的。虽然采用DAS(Direct Attached storage)、NAS(Network Attached storage)和SAN(storage AreNetwork)的传统网络存储系统，在一定程度上可以满足几十至几百TB的网络存储应用需求，但由于系统结构固有的缺陷，使得这类存储系统的可扩展性、管理效率，以及扩展整个存储系统后的性价比远远不能满足动辆几百TB乃至PB量级的大规模数字内容归档应用的网络存储需求(41)(42)。不仅如此，对数描的安全访问和长久保存要求苛刻的新存储系统，也对传统网络存储系统解抉万案提出了严峻的挑战(43)。具体来说，大规模数字内容归档应用对网络存储系统提出了以下五个方面的关键要求。

　　1.如何实现法规遵从

　　随着信息化的进一步深入和普及，很多国家已相继出台相关法律和法规，强制要求数据内容在规定的保存和归档时间内，不允许有任何的修改和删除。如美国的Sarbanes-Oxley法案(38)主要针对企业数据(如E-mail服务器中的邮件数据内容)HIPPA(39)主要针对医疗数据等。

　　如何有效地避从上述对数字内容保存和归档要求的法律法规，建立有效规范的企业信息化管理制度，这就需要对存储基础架构和数字内容归档，以及备份和容灾 (DisasterRecovery)等应用系统根据需求进行相应设计和实现(40)，从整个系统的体系结构上满足法规遵从的要求。另外，需要考虑如何对客户进行身份认证，以及对被访问的数字内容进行访问控制，从而满足安全性的要求。

　　2.如何有效降低海量数字内容存储系统的总拥有成本

　　随着数字内容和信息的"海啸"性爆炸增长，以及上述法规遵从的强制要求引入了额外存储开销，越来越多的企业需要提供TB乃至PB量级的大规模存储系统。这对企业信息系统的基础架构(包括硬件、软件和维护)和管理成本施加了非常大的压力，如何控制和有效降低海虽数字内容存储系统的总拥有成本 (Total Cost of Ownership，TCO)则显得尤为重要。通过相关研究和对实际系统的分析发现，在海量数字内容存储系统中，特别是归档、备份和容灾系统中，存在大量的重复数据和相似数据(44)。通过有效去除这些重复数据，对相同数据只存储一份和只存储相似数掘的不同部分，可以有效利用存储空间，降低设备购置成本、维护成本和能源消耗量，从而有效降低诲最数据内容存储系统的总拥有成本(125)。由于数据最的减少，在存储节点和计算节点之间传送数据的网络的吞吐率也相应提高。存储和计算节点的数拥高速缓存也可以容纳更多数据，从而提高系统运行效率。使用数据压缩技术不仅缩小了数据本身长度，而且也因为减少了很多副本，增强了系统的规模可扩充性。

　　3.如何提高网络传输效率和有效减少网络传输量

　　随着网络的进一步发展和普及，现在绝大多数的系统和应用都是网络化的，Internet成为广域网的事实标准。在当前的技术和工艺发展水平下，特别是在进行大规模数据服务和传输的过程中，网络带宽和网络传输最往往是整个系统的瓶颈，成为最稀缺的资源。

　　若能够采用有效的方法，将网络中的重复负载和数据流去除，或当路由器或网关发现数据源要传给目标的数据内容，但其实已经在之前被其他的数据源传输过了该数据内容时，就不再传输相同的数据内容，从而可以有效节省网络传输最和网络带宽，提高传输速率。图4.2展示了将重复数据删除引擎(124)部署到广域网中，可有效降低网络传输量。

　　4.如何对海量归档数据进行有效检索和获取

　　仅仅把海量数据归档起来是不够的，必须在归档和备份时考虑如何方便以后的数据检索和信息获取。

　　因此，在设计数据归档和备份系统的同时，需要设计相应的数据聚类和缓存方法，使数据的访问延时满足客户而服务质最要求。特别是在广域网络如Internet的应用中，系统的缓存机制设计不合理，例如，北京的客户每次数据访问都需要经过若干跳 (hops)连接到广州的服务器，从广州的服务器取得数据后再经过若干跳 (hops)返回给北京的客户，则应用的服务质量 (特别是某些实时应用如视频/音频应用)是无法保证的。

　　5.如何对海量归档数据的安全性进行保障

　　海量数据归档起来后，如果不能保障数据安全性，这是没有意义的，反而会对数据所有者和使用者带来巨大损失，因此需要从保密性、防恶意删改、身份认证、存储访问控制、完整性、入侵检测等多方面来保障归档数据的安全性。

　　责任编辑：GOCN