校园网数据中心与图书馆存储系统武汉大学图书馆课件.ppt

1、校园网数据中心与图书馆存储系统中南财经政法大学图书馆黄孟黎概论概论w 2003年初，我校新馆落成，面积达26000M2，加上原有的老馆，我校图书馆现有总面积达到了46000M2。w 学校投入了约1200万元的经费用于图书馆的网络建设。一图书馆异地数据存储的崭新方式校园网数据中心校园网数据中心的建立w 我们在新馆的存储系统设计时，向学校提出了建立“校园网数据中心”的建议，很快得到了学校网络中心和主管校领导的支持，并将其列入校园网发展规划中。新馆存储系统的设计思想w 在此次的新馆“海量信息存储系统”的设计中，我们把SAN存储的主要设备放在学校的网络中心，今后,我馆的主要数据库数字资源就存储在“数据

2、中心”，其余一部分文件级的数字资源存放在馆内的NAS存储系统中，图书馆管理系统ILAS数据则用“直连存储”的方式存储在与SUN小型机服务器连接的存储设备中。这种通过“数据中心”来实现图书馆海量信息异地存储的方式具有以下两个优势：可以将全校所有的数据进行集中存储，集中管理，集中可以将全校所有的数据进行集中存储，集中管理，集中维护。今后随着数据数量的不断增长而带来的存储扩容，维护。今后随着数据数量的不断增长而带来的存储扩容，也只在也只在“数据中心数据中心”进行，学校只需划拨资金到进行，学校只需划拨资金到“数据数据中心中心”购置扩容设备即可。目前我校的购置扩容设备即可。目前我校的“数据中心数据中心”

3、已已初步形成，存储容量达到约初步形成，存储容量达到约20TB20TB。w 对图书馆而言，将数字资源放在对图书馆而言，将数字资源放在“数据中心数据中心”，一来，一来可以减少数据维护、设备维护的工作量，二则不再需可以减少数据维护、设备维护的工作量，二则不再需要考虑今后存储空间够不够用的问题。用通俗的话说，要考虑今后存储空间够不够用的问题。用通俗的话说，就是就是“只用不管只用不管”。w 值得一提的是，我馆的海量信息存储系统设计中，因值得一提的是，我馆的海量信息存储系统设计中，因为异地存储方式的确定及校园网为异地存储方式的确定及校园网“数据中心数据中心”的建立的建立都与学校的网络中心有很大关系，所以，

4、网络中心的都与学校的网络中心有很大关系，所以，网络中心的技术专家自始至终参与了这个项目的建设。通过这个技术专家自始至终参与了这个项目的建设。通过这个项目的合作，他们对图书馆的工作及需求有了较深入项目的合作，他们对图书馆的工作及需求有了较深入的了解，这对今后图书馆数字资源在的了解，这对今后图书馆数字资源在“数据中心数据中心”异异地存储、访问的有效实现奠定了基础和保障。地存储、访问的有效实现奠定了基础和保障。w 这种在图书馆海量信息存储系统中设计异地数据存储方式，将图书馆的部分数字资源存储到校园网“数据中心”的方案，目前在我国高校图书馆界尚属首举。在专家论证中，这个方案得到了我们聘请的国内高校图书

5、馆网络数字化建设专家们的肯定，认为它代表了今后高校图书馆数字化建设中在海量信息存储系统方面的发展方向，具有一定的前瞻性。二.图书馆海量信息数据存储系统模式的选择与设计数据存储系统应实现的应用 海量信息存储系统是一个基于海量信息存储各方面需要的整体设计方案,这个方案考虑并实现以下几个方面的应用：1）海量信息的存储：存储图书馆购买或自建的各种数字化信息资源以及图书馆主页及网站发布的各种信息等；2)海量数据的共享：实现各种数字化信息资源在校园网、局域网、互联网上的共享；3)宽带信息的共享：实现如视频资源,点播资源之类的宽带信息资源的共享；4)海量数据的备份。1数据存储系统模式的选择几种存储方式DAS

6、存储(直接附加存储，或称“直连存储”Direct Attached Storege)；NAS存储(网络附加存储Network Attachment Storage)；SAN存储(存储区域网Storage Area Network)SAN存储的优势：存储的优势：基于千兆位的高速高效存储带宽，更适合海量数据高速处理的要求；完善的存储网络管理机制，能对所有存储设备，如磁盘阵列，磁带库等进行灵活管理及在线监测；将存储设备与主机的点对点的简单附属关系升华为全局多主机动态共享模式；可实现 LANfree，数据的传输、复制、迁移、备份等均可在SAN网内高速进行，不需占用WAN/LAN的网络资源；无限的动态平

7、滑扩容能力；兼容以前的各种SCSI存储设备；灵活的网络体系结构，包括点对点，FC-AL仲裁环，Fabric交换网等各种连接方式。比较SAN和NAS的技术特点、应用场合和优缺点的差异，业内人士提出了一种兼具NAS和SAN优点的网络存储模式，并采用存储的虚拟化技术作为融合这两种存储网络的重要手段。在我馆的存储系统设计中，专家们就建议利用这种虚拟存储功能，将我馆原有的存储系统中不同的存储设备的存储空间进行整合，形成一个统一的存储池，同时也可以对存储资源进行集中管理。这种SAN与NAS融合后的存储系统兼具SAN和NAS的优点：如它能在服务器和存储设备之间采用高速的Block I/O方式或使其具有Blo

8、ck I/O的性能；存储设备与存储设备之间采用LAN-free的方式备份数据；能够通过局域网（IP网络），以标准的NFS和CIFS协议在异构的环境下实现文件级的访问与共享；适应复杂的网络环境；构建、维护、管理、使用简单方便；设备投资的总体成本较低，等等。总之，一个满足需求的、理想的存储网络系统应该是统一在现有的、成熟的IP网络基础上，可以在任何操作系统的平台上，在任何时候，从任何地点，访问任意位置的任意量信息这正是我们选择海量信息存储系统模式的原则和目的。2数据存储系统的构架 SAN+NAS的存储容量设计为10TB；DAS存储容量约为1TB；原有磁盘阵列容量约为2.5TB；存储总容量约为13-

9、14TB。存储系统构架简图：21存储系统设计目标 具备极高的安全性；具有先进的体系结构，易于扩充。；具有运行稳定，关键应用无单点故障的特点。具有较高的性价比；具备良好的兼容性；具有高可用性保障。22存储系统设计原则 先进性；通用性；安全性；灵活性；可管理性；投资保护性。23存储系统设计要求 SAN存储设计要求 支持更多协议以实现更多应用；具有自适应的通用端口，支持光纤交换和环路设备；支持远程连接；支持多通道容错级联；具有灵活的负载共享，在交换机之间实现可选的带宽；具有良好的可管理性，可通过基于WEB界面的管理工具进行设备管理；具有高可靠性、高稳定性，可实现724不间断运行；存储设备的关键部位考

10、虑冗余设计。NASNAS存储系统设计要求存储系统设计要求 支持更多协议，具有良好的兼容性具有多端口，高速度，高带宽具有集群支持能力由内置备份和快照复制功能提供保护备份支持具有杀毒软件支持能力具有快速复制能力用户、用户群共享文件创建/管理，可通过基于WEB界面的管理工具进行设备管理配备方便的热插拔硬盘驱动器和平台组件具有高可靠性、高稳定性，可实现724不间断运行存储设备的关键部位考虑冗余设计 DASDAS存储系统设计要求存储系统设计要求 我馆的直连存储系统（我馆的直连存储系统（DASDAS）主要用于）主要用于ILASILAS系统等关键应用数系统等关键应用数据的存储，应能高速、安全地存储这些关键数

11、据，并可按需要据的存储，应能高速、安全地存储这些关键数据，并可按需要在在SANSAN、NASNAS和磁带库分别进行数据快照、日备份、周备份，以和磁带库分别进行数据快照、日备份、周备份，以保证数据的绝对安全。直连存储系统采用小型机本机内置的硬保证数据的绝对安全。直连存储系统采用小型机本机内置的硬盘槽位增加或扩充存储空间来实现大量数据的存储。盘槽位增加或扩充存储空间来实现大量数据的存储。磁带库、数据备份系统的设计要求 备份系统主要是对我馆的关键应用数据（如备份系统主要是对我馆的关键应用数据（如ILASILAS数据、借阅证管数据、借阅证管理数据等）进行完全备份，它应能支持自动化的备份方式；通过理数据

12、等）进行完全备份，它应能支持自动化的备份方式；通过备份策略的制定，简化日常数据维护的工作量；在数据意外丢失备份策略的制定，简化日常数据维护的工作量；在数据意外丢失时能够进行快速的数据恢复，保证数据的安全性；应能提供灾难时能够进行快速的数据恢复，保证数据的安全性；应能提供灾难恢复手段，在服务器崩溃时，能够快速恢复系统应用，保障系统恢复手段，在服务器崩溃时，能够快速恢复系统应用，保障系统应用的连续性和高可恢复性；应能支持各种主流服务器平台、操应用的连续性和高可恢复性；应能支持各种主流服务器平台、操作系统、数据库系统及应用系统；支持多种磁带格式、主流驱动作系统、数据库系统及应用系统；支持多种磁带格式、主流驱动器类型，并保证系统将来能够平滑、安全地升级。此外，非关键器类型，并保证系统将来能够平滑、安全地升级。此外，非关键数据亦可采用数据亦可采用NASNAS进行安全有效的备份。进行安全有效的备份。