JIFANG360.com - 机房360
- 数据归档和获取算法 2013/2/3
- 在客户端，每个侍归档的文件首先会通过特定的文件分块算法被切割成一些互不重叠的变长数据块，如Rabin fingerprinting、metadata aware chunking。
每个数据块以加密的哈希算法 (如MD5，SHAl等)对它们的内容进行计算，所得到的哈希值作为它们的标志符区分。文件的属性信息，以及文件包含的所有的块的标志符将被记录到文件[阅读全文]
- 动态的分布式数据恢复 2013/2/3
- 基于ISN的计算和通信能力，R-ADMAD提出了一种动态的分布式恢复算法:当检测到ISN失败时，对于MDS记录的存放在这个lSN上的每一个对象，系统可以动态选择存储池中的任意一个ISN作为恢复目标，这样就可以在不同目标lSN上通过读取特定的对象并对它们进行解码，将失败的ISN分布式地恢复出来。[阅读全文]
- 基干纠错码ECc的数据冗余编码及分布 2013/2/3
- R-ADMAD基于ECC的数据封装、编码和分布流程如图4.18所示。为了简化示意图，每个最终存储在ISN中的对象用表示。其中，odata_or_check表明该对象是一个数据对象还是一个校验块对象。如果有新的艾件被存储到对象中，MDS通知客户端将这些块存储到哪些ISN上，这些lSN称为代表性ISN(简称R-ISN)。
[阅读全文]
- R-ADMAD 系统构架 2013/2/3
- R-ADMAD的实现即基于这些系统框架。在R-ADMAD系统中，存储节点通过存储区域网络连接在一起，是实际数据的存储池。本节主要说明引入R-ADMAD后，系统新增的功能模块和相应流程的变化。[阅读全文]
- 保障带重复数据删除的存储系统可靠性的2种方法 2013/2/3
- 带重复数据删除的归档存储系统获得了更好的存储空间利用率是以降低数据可靠性为代价的，这在很多实际应用尤其是长期归档系统中是不可接受的。因此，在带重复数据删除的存储系统中，尤其在带重复数据删除的大规模归档存储系统中，如何保证数据可靠性是一个关键问题。Bhagwat，等人[100]首先注意到了这一问题，并初步定最分析[阅读全文]
- 解决重复数据删除与可靠性的矛盾 2013/2/3
- 童复数据删除技术近年来获得了学术界和工业界的广泛关注，并日益成为大规模存储系统中的一个通用组件。重复数据删除是一种在文件内部层次通过无损的数据压缩方法来缩减垂复数据的技术。它首先将文件分割成互不交叠的数据块，然后将内容相同的块在存储系统中只保留一份。通过这种发现重复数据并且进行消除的方法，带重复数据[阅读全文]
- 应用驱动的数据切分算法 2013/2/1
- ADMAD面向大规模归档存储系统的实际应用而设计，这些应用都有减少存储空间及优化数描管理的需求，包括企业级电子邮件服务器归档、Web文档归档，以及多媒体数据文件归档。为了验证ADMAD的想法，因此目前只是简单地将文件类型和文件格式作为文件的元数据信息用于文件切分。[阅读全文]
- ADMAD归档存储体系结构 2013/2/1
- ADMAD是主要针对大规模归档存储系统而设计的，其中归档进程可以部署在不同的应用服务器上，且可以作为后台守护迸程运行。在当前主流的基于磁盘设备的归档存储系统中，由于需要数据始终保证在线可访问，所以应用的数据响应时间(Responsenme)是一个关键的服务质量参数，故要求归档的数据需要专门针对大规模归档的特点进行数据[阅读全文]
- 数据组织和存储布局 2013/1/31
- 数据组织与存储布局是存储领域长朔以来的重点研究内容，本节主要分析与大规模归档存储系统相关的数据组织和分布工作。由第l章对大规模归档存储系统特点的分析可知，大规模归档存储系统往往是由大量应用服务器和存储节点所构成的人规模分布式共享存储系统，常常包含成干上万的服务器和存储节点，部署在局域高速网络 (如数据[阅读全文]
- 基于差量的重复数据删除方法 2013/1/31
- 基于差量的重复数据删除方法，其原理是通过计算一个数据对象相对于另一个已知数据对象的差别，则目标对象可以通过对源对象和差最进行运算得到。对应于存储系统，则只需要存储源对象和差量即可(67),(68),(69)。其典型用途是用于版本控制系统、HTTP协议、备份和恢复系统等。[阅读全文]
- 3种文件切分方法进行比较 2013/1/31
- Policroniades和Pratt等使用几种典型的不同数据集比较了以文件为数据片段粒度的切分、定长数据片段切分和变长数据片段切分的数据压缩效果和开销(66)，结论是存储利用率方面变长数据片段优于定长数据片段10—30%，而文件粒度压缩存储利用率总是比定长和变长数据片段存储利用率差:计算开销方面，变长数据片段切分的代价大于定[阅读全文]
- 重复数据删除技术挑战 2013/1/31
- 重复数据删除技术在海量存储系统中很重要，近年来也引起了学术界和工业界越来越多的关注。一般来说，重复数据删除是一类旨在最小化文件之间(inter-file Level)的冗余和重复 (Duplication&Redundancy)的无损压缩算法 (Lossless Data CompressionAlgorithms)。重复数据删除的优点是可以相应地减少网络中的数据传输量。[阅读全文]
- 大规模数字内容归档应用对网络存储系统的五个关键要求 2013/1/31
- 归档数字内容痛息数量的急剧增长与磁存储技术的不断发展是联系在一起的。虽然采用NAS和SAN的传统网络存储系统，在一定程度上可以满足几十至几百TB的网络存储应用需求，但由于系统结构固有的缺陷，使得这类存储系统的可扩展性、管理效率，以及扩展整个存储系统后的性价比远远不能满足动辆几百TB乃至PB量级的大规模数字内容[阅读全文]
- 云储存数据服务类型和数据保护挑战 2013/1/31
- 云存储是指通过集群应用、网格技术或分布式文件系统等功能，将网络中大最各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能的一个服务系统。云存储系统中的所有设备对用户来讲都是完全透明的。云存储不是指某一个具体的设备，而是指一个由许许多多个存储设备和服务器所构成的集合体[阅读全文]
- 云存储系统技术与优势对比 2013/1/25
- 云存储提供的是存储服务，存储服务通过网络将本地数据存放在存储服务提供商(SSP)提供的在线存储空间。需要存储服务的用户不再需要建立自己的数据中心，只需向SSP申请存储服务，从而避免了存储平台的重复建设，节约了昂贵的软硬件基础设施投资。[阅读全文]
- 详解云存储中虚拟化技术构成与模型 2013/1/24
- 存储领域国际权威机构SNIA(存储网络工业协会)给出了存储虚拟化(Storage Virtualization)的定义：“通过将存储系统/子系统的内部功能从应用程序、计算服务器、网络资源中进行抽象、隐藏或隔离，实现独立于应用程 序、网络的存储与数据管理”。[阅读全文]
- 云存储管理的关键是存储虚拟化 2013/1/21
- 全球的数据存储量正在以不可预测并且加倍的速度在增长。随着企业在快速增长的情况下努力提升存储性能，一些企业开始寻找云存储服务作为一个解决方案。这显然对于云提供商是一个机遇，但是他们也同样要面对云存储管理上的问题和淹没在泛滥的数据中的风险。[阅读全文]
- 云存储是托管服务供应商的存储服务 2013/1/21
- 有关云的炒作已经模糊了云存储，以及云备份恢复和还原(云BURR)之间的界限。甚至使得云存储和云端的存储，以及“同步和共享”这样的概念差别变得模糊。许多供应商乐意与此，因为这使得他们的方案看上去对于潜在客户更具吸引力。不过模糊不清的云定义混淆了市场，妨碍了技术部署和推进的速度，并最终损害了市场中的每一个人。[阅读全文]
在线投稿
投稿指南