RAID网络存储概论

,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*, Copyright SEI ECNU . All Rights Reserved.,Author: NK Jiang,*,网络存储导论,Part_01,基础知识,日期:,2024/9/16,第,1,章,RAID,与大容量存储,本章目的：, 了解海量存储的基础知识；, 掌握,RAID,及,RAID,分级的概念,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,2,Author: NK Jiang,RAID,概念,RAID,的全称为,Redundant Array of Inexpensive/Independent Disks,，,而不是某些词典中所说的,Redundant Access Independent Disks,，,它的中文名称为,廉价（独立）磁盘冗余阵列。,RAID,等级,磁盘阵列针对不同的应用使用不同的技术，称为,RAID,等级，每一等级代表一种技术,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,3,Author: NK Jiang,RAID-0,等级,RAID0,（,Striped Disk Array without Fault Tolerance,，没有容错设计的条带磁盘阵列）,如图,1-1,所示,图,1-1 RAID0,结构图解,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,4,Author: NK Jiang,RAID-1,等级,RAID-1,的定义是,Mirroring and,Duplexing,（相互镜像）,结构如图,1-2,所示,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,5,Author: NK Jiang,RAID-2,等级,RAID2,是目前最为复杂的,RAID,系统等级之一,RAID2,之所以复杂是因为它采用了早期的错误检测与修正技术,汉明码（,Hamming Code,）校验技术,图,1-4 RAID-2,结构图解,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,6,Author: NK Jiang,RAID-3,等级,RAID3,的定义是,Parallel Transfer with Parity(,并行传输及校验）,图,1-5 RAID-3,结构图解,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,7,Author: NK Jiang,RAID-4,等级,定义是,Independent Data Disks with Shared Parity Disk(,独立的数据硬盘与共享的校验硬盘）,图,1-6 RAID-4,结构图解,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,8,Author: NK Jiang,RAID-5,等级,RAID-5,和,RAID-4,相似，但避免了,RAID-4,的瓶颈，方法是不用校验磁盘而将校验数据以循环的方式放在每一个磁盘中,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,9,Author: NK Jiang,RAID-6,和,RAID-7,等级,RAID-6,（,Independent Data Disks with Two Independent Distributed Parity Schemes,，,带有,2,个独立分布式校验方案的独立数据硬盘）等级,是在,RAID5,基础上，为了进一步加强数据保护而设计的一种,RAID,方式，实际上是一种扩展,RAID5,等级,RAID-7,不仅仅是一种技术，还是一种存储计算机（,storage computer,）。,RAID7,存储计算机操作系统（,storage computer operating system,）是一套实时事件驱动操作系统，主要用来进行系统初始化和安排,RAID7,磁盘阵列的所有数据传输，并把它们转换到相应的物理存储驱动器上,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,10,Author: NK Jiang,第,2,章磁盘存储阵列容错和性能介绍,本章目的：, 理解磁盘阵列的容错功能；, 掌握磁盘阵列在一些不同应用背景下的性能,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,11,Author: NK Jiang,磁盘输入输出系统的,4,大要求,(1),增加存取速度；,(2),容错（,fault tolerance,），即安全性；,(3),有效地利用磁盘空间；,(4),最大限度地平衡,CPU,、内存及磁盘的性能差异，提高计算机的整体工作性能,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,12,Author: NK Jiang,磁盘阵列的额外容错功能,多数据流对磁盘阵列系统性能的影响,单主机连接情况下的磁盘阵列存储系统性能,多主机同时访问时系统性能变化,来自不同主机的多个数据流对小规模磁盘阵列存储系统性能的影响,来自不同主机的多个数据流对大规模磁盘阵列存储系统性能的影响,来自不同主机的多个数据流对,NAS,存储系统性能的影响,产品举例分析,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,13,Author: NK Jiang,相关磁盘阵列存储术语,SCSI(Small,Computer System Interface,，小型计算机系统接口）,ATA(AT Attachment,，,AT,嵌入式接口,),即俗称的,IDE,（,Integrated Drive Electronics,）,Serial ATA,（串行,ATA,SATA,）采用的是串行数据传输方式,NAS,（,Network Attached Storage,，网络连接存储,DAS,（,Direct Attached Storage,，直连式存储）,SAN,（,Storage Area Network,，存储区域网络）,Array,磁盘阵列模式是把几个磁盘的存储空间整合起来，形成一个大的、单一连续的存储空间,Array Spanning(,阵列跨越,),2024/9/16, Copyright SEI ECNU . All Rights Reserved.,14,Author: NK Jiang,第,3,章存储网络技术,本章目的：, 介绍与存储有关的网络技术；, 介绍存储网路体系结构；, 讨论新一代多层智能化存储网络；, 讨论存储网路的发展趋势；,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,15,Author: NK Jiang,存储网络基础,SCSI,是连接存储设备与服务器的最通用的方法,TCP/IP,TCP,协议和,IP,协议共同构成了通信协议族，这组协议是,Internet,获得成功的主要因素,以太网,最早由,Xerox,公司所开发的以太网（,IEEE 802.3,）是局域网领域得到最广泛使用的技术，也是桌面计算机互联的最佳技术,Fiber Channel,大多数的存储区域网络,(Storage Area Networks,，,SAN),都是基于一个叫做,Fiber,Channel(FC,),的体系结构。,FC,的发展是为了解决服务器和存储设备之间的通信要求。这些要求包括速度、容量和可靠性等,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,16,Author: NK Jiang,存储体系结构,直连式存储（,DAS,）,在直连式存储（,Direct Attached Storage,，,DAS,）方式中，存储设备是通过电缆（通常是,SCSI,接口电缆）直接连到服务器的，输入输出（,I/O,）请求直接发送到存储设备,DAS,结构如图,3-1,所示,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,17,Author: NK Jiang,存储体系结构,网络连接存储（,NAS,）,网络连接存储,(Network Attached,Storage,NAS,),，即将存储设备连接到现有的网络上，提供数据和文件服务,结构如图,3-2,所示,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,18,Author: NK Jiang,存储体系结构,存储区域网络（,SAN,）,存储区域网络,(Storage Area,Networks,SAN,),是一个用在服务器和存储资源之间的、专用的、高性能的网络体系，为实现大量原始数据的传输而进行了专门的优化,SAN,与,NAS,的区别和联系,技术上是互补,SAN,是以数据为中心的，而,NAS,是以网络为中心的,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,19,Author: NK Jiang,以太网和存储网络相结合的多层环境,iSCSI,iSCSI(Internet,SCSI,Internet,小型计算机接口,),是,IETF,（,Internet Engineering Task Force,，互联网工程任务组）制订的一项标准，用于将,SCSI,数据块映射成以太网数据包,FCIP,(Fiber Channel over IP),是在,TCP/IP,上用管道技术来实现,Fiber Channel,的受推荐标准。,它采用封装技术将,Fiber Channel,协议封装在,IP,包中，以使它能够通过,IP,网,SAN,的应用,(1),数据共享,(2),存储共享,(3),数据备份,(4),灾难恢复,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,20,Author: NK Jiang,存储网络的未来发展,多层智能化存储网络,用一种层次化的方式来实现网络和存储智能，为存储网络的发展开辟了一个新的纪元,存储管理的自动化与智能化,提高存储效率,减少总体拥有成本，增加投资回报,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,21,Author: NK Jiang,如何建造企业,SAN,系统,怎样才能找到建设存储环境的最佳构件？,从目前的标准来衡量，最佳构件即是由其最终建成的基础设施能给予应用系统充分支持，并能随业务需要灵活扩展。,SAN,应用系统评估,包括以下,5,项,1.,应用要求,2.,数据存储要求,3.,备份和灾难恢复战略,4.,网络连接要求,5.,服务器连接要求,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,22,Author: NK Jiang,1.,应用要求,1,） 宕机冗余,2,） 性能,3,） 增长,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,23,Author: NK Jiang,2.,数据存储要求,1,） 数据位置,了解数据量和数据的位置很关键。数据是放在统一的存储库中，还是分布在存储小区内； 存储据点之间的电缆距离和与服务器的连接等都必须要纳入考虑范围。长途连接,(,大于,10km),会有特别的连接要求，如支持长途连接的,Switch,、光纤信号转发器和桥接等。,2,） 数据量,需要存取的数据量是决定网络带宽和存储网络连接数量的关键因素。存储阵列的规模和性能特点将决定支持阵列的必要网络连接数量。此外，每个存储端口支持的服务器数量由存储制造商确定，以避免网络堵塞和瓶颈。,3,） 数据和存取共享,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,24,Author: NK Jiang,3.,备份和灾难恢复战略,集中式、离网、少服务器备份是促使企业实施,SAN,的主要因素。关于备份如何生成的评估也是必要的，因为它将决定连接范围和吞吐量大小。集中式备份战略要求设计完备的,SAN,。为了使战略成功，从备份设备到每一个存储设备之间都应该有一条高速、高可用性的数据路径,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,25,Author: NK Jiang,4.,网络连接要求,1,） 端口计数要求,评估支持现有和未来增长所需网络连接数十分重要。如果在部署初期没有考虑增长因素，事后不断追加网络规模和重新配置会浪费大量资源，并增加宕机时间。在最初设计中，如果没有包括完备的扩展战略，在实际应用中不断扩展的网络会出现传输量不平衡的现象，并最终影响整个网络的性能和可用性。,2,） 网络传输模式,为统一存储而实施的,SAN,与为少服务器备份应用而实施的,SAN,的传输模式有很大不同。服务器和存储设备之间的新连接需要考虑额外的端口计量。如果忽略了这一点，,SAN,没有为传输量的增长做好准备，当数据在全网范围内传输时，很有可能产生“瓶颈”。,3,） 带宽要求,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,26,Author: NK Jiang,5.,服务器连接要求,每个服务器的,SAN,连接请求需要从带宽、性能和可用性等方面确定，目的是了解每一种连接在正常和高峰传输环境中的不同要求,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,27,Author: NK Jiang,存储网络系统中的交换机,如果是支持大型企业应用，就需要多类型的交换机（,Switch,），每种,Switch,在基础设施中承担不同的任务。有些,Switch,承担到存储库的主要连接，因此需要非常高的可用性。其他,Switch,用于支持服务器集群的整合，只需要高性能和较少端口数量,Switch,类型,分为,3,种：,光纤信道,Switch,（,Director,）、,网络,Switch,和,判优环路,Switch(,或称环路,Switch),分类也不是绝对的，某个厂商的,Director,在一定情况下可能是另一厂商的网络,Switch,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,28,Author: NK Jiang,不同类型,Switch,比较,1,） 可用性,可用性用于衡量,Switch,正常运行时间，也用于衡量满足应用系统和基础网络需要的能力,2,） 性能,无论是只安装一台,Switch,，还是要建立完整网络，性能问题都不能回避。,Switch,的性能取决于,Switch,的结构。结构性能实际上取决于整体网络设计和网络内的传输模式,3,） 扩展性,扩展性指的是,SAN,能以对业务损害最小的方式增大规模,4,） 成本,在采购网络基础设施时，成本是最重要的考虑因素,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,29,Author: NK Jiang,企业存储网络系统管理,网络的不断扩展，管理重点从,Switch,转移到网络，管理问题变得重要起来,SAN,交换机管理侧重,Switch,配置和流量监控。该功能有助于用户评估端口的应用情况和,Switch,的总容量,网络管理则侧重于全网运行，而非某个,Switch,网络故障隔离和恢复也是网络管理的重点,在多供应商网络中，用户要管理异构,SAN,，要使用多种管理工具，导致管理变得更加复杂，成本也更高,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,30,Author: NK Jiang,第,4,章备份带库,本章目的：, 引入磁带库的概念；, 介绍磁带库的发展史；, 介绍磁带库的评估指标及其重要性,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,31,Author: NK Jiang,磁带库基础,磁带存储还是由于其本身固有的特质确保青春不老,主要概念,1.,磁带库的机械手,2.,磁带库分区,3.,磁带库连接,4.,广泛兼容的连接性,5.,多类型磁带机支持,6.,海纳百川的容量,7.,稳步提高的性能,8.,逐渐进步的可靠性,9.,磁带库的分类,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,32,Author: NK Jiang,磁带库备份工作原理,图,4-1,是磁带库备份工作原,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,33,Author: NK Jiang,图,4-2,典型,SAN,拓扑图,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,34,Author: NK Jiang,4.2,磁带库的发展,1.,虚拟磁带库,虚拟磁带库将磁盘空间模拟成磁带，在传统的磁带备份系统中，数据直接从应用系统传输到磁带中，使用虚拟磁带库以后，数据首先备份到虚拟磁带库即磁盘中，然后由虚拟磁带库再备份到磁带上,特点,2.,磁带库的智能化,磁带库的智能化就是充分发挥软件的功能，加强磁带库的管理以及连接性能，使得数据备份更安全更可靠,3. WORM,(Write Once Read Many,一写多读,),技术是通过软件和硬件设备相结合的控制，使存储介质只能写入一次数据，而不能重复写入且不允许修改，从而为特殊、重要数据备份提供了最安全的保证,4.,iSCSI,越来越多的磁带库厂商都支持,iSCSI,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,35,Author: NK Jiang,4.3,磁带库评估,1.,升级及兼容性问题,2.,部件产品寿命,3.,能否充分发挥磁带机性能,4.,数据链路调节功能,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,36,Author: NK Jiang,End of Part 1,2024/9/16, Copyright SEI ECNU . All Rights Reserved.,37,Author: NK Jiang,