《计算机光盘软件与应用》
银行、证券、档案馆存储管理
光盘库应用方案建议书
21世纪档案信息储存最佳解决方案
关于海量数据的长期安全存储
符合法规的海量数据安全存储是关系到企业命脉的大事,仅把它视为存储技术问题是不够的,更多的是要从企业的发展战略、经济参数和法规方面来综合考虑。
数字化内容管理是现代企业的大脑
在企业保存的数据中,固定内容信息可以占到80%,这个比例还
在提高。与此相关的信息管理系统从不同的角度提升着企业的记忆力,诸如数字档案管理系统DMS(Document Management System),企业内容管理 ECM (Enterprise Content Management),电子邮件管理E-mail Management,信息生命周期管理ILM(Information Lifecycle Management),商务过程管理BPM(Business Process Management)等。可以说具有长久记忆的海量信息管理是现代企业的大脑,是企业赖以生存的核心竞争力。
数字化档案管理有效地弥补了传统的纸质档案管理方法有诸多
的缺点。这些缺点主要表现在以下方面:
1.可查找性:查找时间长;
2.可提供性:要找的文件数据不一定马上能提供;
3.流通效率:资料流通的管理效率低;
4.保管费用:大量资料的管理费用很高;
5.可共享性:资料无法同时供多人使用;
6.版本更新:无法确保资料的实效性;
7.资料完整性:文档资源可能与登记不符;
8.专题检索:查找分散在各处的文档非常耗时;
9.多媒体数据:无法即时剪辑和处理。
法规遵从性
在数字化档案管理系统中,海量数据的长期存储(归档)占有关键的地位。在现代磁介质存储技术单位存储价格不断下降的今天,人们往往会忽略一个重要的因素,即数据存储(Data Storage)和备份(Backup)不等于归档(Archive)。因此,国际先进工业国家都纷纷专门立法(见下图),以保证归档数据的法规遵从性(Compliance)。归档数据的法规遵从性主要体现在数据的不可更改性和不可删除性。为此归档数据必须存储在WORM(Write Once Read Many,一次可写)媒体上,并能安全地长期保持。
随着我国的信息管理水平与国际逐渐接轨,由法规遵从性和数据长期安全存储所产生的存储需求将会急剧增长。根据IDC的统计分析,在当今的整体数据中,有20%与法规遵从性规则和标准有关,并有约30%涉及到数据安全。
数据海啸的到来
据IDC预测,存储市场今后几年会有持续的高增长。其中电子邮件的归档将由2006年的4.71亿美元增长到2010年的10亿美元;数
据生命周期管理(ILM)软件到2010年将翻一番至17亿美元;有关法规遵从性的软硬件及服务到2010年将翻至214亿美元。有关信息安全的软件将从2006年的每年400亿增长到2010年的每年650亿美元。
根据IDC最新的市场分析报告,全国世界2006年的数据存储量为161 Exabyte(1个Exabyte等于10亿GB)。平均到全世界每人为24GB。这其中图像和视频数据占了很大比例:2006年数码相机产生了1500亿张照片。IDC预测到2010年将再产生5000亿照片。
该机构预测,数字信息量将每年增长57%,到2010年翻6倍,达到988Exabyte。虽然这其中70%的数据由个人产生,企业、政府和各类协会将对总体85%的数据的安全性,私密性,可靠性和法规遵从性负责。由此正产生着巨大的专业存储需求。
这种爆炸性的增长,外电将之称为数据海啸,它将对现有计算机系统结构产生巨大的革新压力并推动其向以信息为中心的体系结构发展。
磁盘阵列 + 磁带备份 数据保险箱
在过去的20多年中,磁盘和磁带在技术上一直高速发展。特别是磁盘,容量在不断增大,价格也在降低。这使得人们可以用较低的单位存储成本来搭建具有一定容错功能的磁盘阵列(RAID)。在专业存储中,以磁盘阵列为主体,磁带做备份的存储结构被广泛应用。然而对于大量数据的长期存储,这种体系结构是不安全的。
Google公司在大数据量应用环境下所做的统计研究表明,磁盘阵列中的硬盘损坏率是相当高的:如6块硬盘同时工作两年的存活率为54%,3年存活率30%。12块硬盘5年的存活率只有1%!这势必影响到数据安全和运营维护成本。
IBM苏黎世实验室的研究指出,在使用企业级SCSI硬盘和RAID 5存储100 TB数据的情况下,前5年丢失数据的几率是24%!
现代化企业不能够承受大量数据丢失所带来的损失。
数据长期安全存储的3-2-1策略
在社会信息化的发展进程中,人们一直在寻找对数据长期保存和防护的更好办法。许多专家已经意识到传统的备份和复制方法并不能够提供有效的数据保护策略。把需要长期保存的数据存在永远高速旋转的磁盘上并不断对它实施备份的做法只能增加不必要的复杂性、费用和风险。