基于虚拟接口的网络存储系统研究（1）_存储_基础信息化_125

《基于虚拟接口的网络存储系统研究（1）_存储_基础信息化_125》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、基于虚拟接口的网络存储系统研究（1）_存储_基础信息化　　计算机与互联网技术日新月异，人类社会信息化进程逐步深入，数据密集型应用不断涌现，存储需求也因此不断扩大，存储系统面临着严峻的挑战。存储系统不仅要具有较高的访问速度，同时还要能够合理地利用所有异构的存储资源，具有高可靠性和可扩展性。因此，利用高速网络通道组建网络存储系统并且在存储技术上寻求创新与突破是迎接这一挑战的最佳策略。　　虚拟接口体系结构（VirtualInterfaceArchitecture，VIA）是轻量级通信协议的工业标准，它具有通信开销小，传输带宽高等很多固有优点。特别是它缩短了传统的I/O路径，较好地解决了以F

2、C（FibreChannel）为基础的存储网络互操作性问题，而且提供了远程DMA（DirectMemoryAccess）传输机制，可以实现直接存储访问。因此，将VIA应用于网络存储系统中，构建基于虚拟接口存储网络系统VISA（VirtualInterfaceStorageArchitecture）可以有效地缓解网络存储系统中的传输瓶颈，解决存储网络的兼容性和互操作性，节省存储开支。VISA系统中存储资源由存储节点提供，被元数据服务器管理调度，位于VISA内部的用户可以直接使用这些存储资源，远程用户可以通过iSCSI连接进行远程存储访问。　　VISA系统利用VIA作为数据通信传输协议，

3、而已有的VIA实现要么因为使用专用的特殊网络设备，不仅兼容性不好，而且造价昂贵，要么因为抹煞了VIA的固有优点而造成性能不高。为了克服这些缺陷，进一步提高VISA系统的性能并保持其良好的兼容性和互操作性，设计了适合于存储的VI网络适配器VI-NIC（VirtualInterfaceNetworkInterfaceCard）。它采用以太网作为传输媒介，通过SOC（SystemOnChip）的方式在适配器端实现VIA协议功能，从而降低了主机的通信开销，提高了数据传输性能，并且保持了良好的兼容性和低价格。　　异构存储资源的管理与存储资源利用率不高是存储系统需要解决的另一难题。为此在VISA

4、系统中实现了两级存储虚拟化，第一级存储虚拟化是由存储节点将异构的存储设备虚拟为具有统一访问界面的存储实体，第二级存储虚拟化则是通过存储资源的动态分配与块地址的动态映射实现块级存储虚拟化。第一级存储虚拟化实现了对异构存储资源的统一管理与访问，块级存储虚拟化则既提高了存储资源的利用率，节约了存储成本，又可以通过优化的存储资源分配与块地址映射策略提高存储访问性能。　　因素，因此设计并分析了三种不同的分配与映射算法。布局优先的资源分配与块地址映射算法仅考虑数据的分布与布局，可以实现对数据读取性能的优化；负载优先的资源分配与块地址映射算法则仅考虑了存储节点的负载对存取性能的影响，可以优化写请求

5、的响应时间。综合二者的优点，综合的资源分配与块地址映射算法既考虑到存储节点的当前负载情况，又兼顾数据分布与布局的均匀性，实现了对VISA系统读/写性能的全面优化。　　缓存一直都是优化系统性能的一项重要技术，而决定其性能的关键因素则包括数据块的替换策略和数据块的放置策略两个方面。根据网络存储系统的特性和VISA系统的缓存分布特征，提出了访问即可淘汰的第二级缓存替换策略和基于存储地址空间连续性和局部性的智能预取策略。它们在几乎不增加系统开销的情况下可以有效地改善VISA系统的存储访问性能。1存储市场需求　　计算机和互联网技术在短短的几十年内已经使人类的生活发生了翻天覆地的变化，随之而来的

6、就是信息的“大爆炸”。一项统计显示，人类在过去10年中产生的信息超过了之前30万年来所有信息量的总和。如何存储、分类、管理如此大量的数据信息已经成为计算机界的一个重要研究课题。1.1存储市场潜力无限　　信息化的时代带来信息化的生活，数字媒体技术的发展使得人们不论是在家里、在办公室，还是在旅途中都可以愉快的享受数字照片、音频、视频以及其他各类数字多媒体服务。要享受这些服务，人们离不开数码相机、MP3播放器、数码摄像机等数字终端设备，而这类掌上设备广泛使用闪存（FlashMemory）作为存储设备。根据业界统计，2003年全球Flash存储器的市场产值已从2002年的77亿美元增长到13

7、0亿美元，估计到2006年时其产值就将超越DRAM（DynamicRandom-AccessMemory），到2007年更将增长到430亿美元的规模。一般认为Flash存储市场的增长是和以磁盘、磁带为基础的大规模网络存储相对立的，但事实恰恰相反，正如希捷公司总裁兼首席执行官比尔·沃特金斯(Bill.Watkins)先生所说的一样：“许多媒体认为我们与Flash市场是对立的，这是一种错误的看法。实际上，我们非常欢迎Flash的存在。我们可以把Flash市场当