数据流存储(精选12篇)
数据流存储 篇1
随着信息技术和计算机的发展,人们的工作、生活和计算机紧密相连。小李是公司重要文件保管处的一名白领,他深刻感受到自己电脑里的资料就是他工作的全部心血。里面有客户资料,客户联系方法,重要开发文档,培训资料等。他最担心的就是哪天如果电脑中毒,硬盘毁坏不能恢复,那么工作可就全废了。现在流行一种新的存储方式———数据在线存储。使用它就方便了,把文件资料传到互联网保存就解决问题了,免除了后顾之忧。如今,由于网络应用的飞速发展、多媒体数据的日益增长、视频、音频等内容的丰富、更长时间段数据的存储需求等因素,在线数据存储的用户也迅猛地发展。
在线数据存储,又称为互联网数据存储,是一种在线存储技术,你可以把它看成一个放在网络上的硬盘,向用户提供文件的存储、访问、备份、共享等文件管理功能。如果你是一个安全意识很强烈的人,你可以把自己重要的文件和财物存储到银行的保险箱里,但如果这些文件是数字的,你可以把它们存储到一个虚拟保险箱里,即储存在互联网上。在线数据存储不仅提供了额外的弹性源,供存放资料,而且还可以作为备份机制,并提供了有效的方法共享数据给别人。
1在线数据存储特点
在线数据存储之所以流行并发展很快,因为它和传统的存储工具如U盘、移动硬盘相比有自己的特点:
1)存储方便快捷
无论何时何地,你可以将你的文档、照片、音乐、软件统统存起来,正感受在线存储的方便。比如小王在网上找到很多免费的MP3音乐,可是他没有属于自己的电脑,于是他将MP3音乐保存到互联网上,这样无论到哪儿上网都可以直接下载使用,再也不用重新东找西找了;另外也可以把常用软件一网打尽。如果你是个装机高手,别人总是喜欢让你帮忙装系统,那么就可以把装系统必备的软件放到网盘,每次装机时,直接登录在线存储网站就可以找到了。
2)随时随地访问
不管是在家中、单位还是公众网吧或是世界上其它任何地方,只要是电脑能连接到因特网,你就可以管理、编辑你存储在互联网里的文件。具有上网功能的手机也能获得这些数据,随时随地访问你的在线存储的数据。
3)备份永久安全
将你的重要个人文档、数据、必备软件、系统补丁等备份,同误删带来的阵痛告别。电脑很容易受到硬盘驱动器崩溃或病毒的攻击。因此,安全的数据备份,保护自己的数据,将显得日益重要。应该注意的是,备份数据必须存放在其他一些地方,如放在其它的计算机的存储器上。你可以尝试使用在线数据存储。比如自己的电脑驱动永久备份的问题,如果电脑有点老,经常需要重新装系统,每次格式化硬盘后就要去网上到处搜索驱动。如果是把电脑声卡和显卡的驱动都存到在线数据存储网站里备份起来,以后就不再为找驱动而烦恼了。
4)在线数据存储的容量很容易扩大
每当你的在线数据存储量达到最大容量限制时,你可以简单地购买更多的空间来存储,没有必要购买和安装额外的存储硬件。
5)数据共享
他人也能访问你的在线存储的数据,真正实现了数据的共享。
2在线数据存储网站
现在不仅是个人,中小企业也成为存储市场中迅速崛起的生力军。因为中小企业普遍存在资金有限、缺乏专业IT管理人员、对存储设备扩展性要求高的问题。而在线数据存储可以随时自助升级扩容。在线数据存储有这么多特点,下面我向大家介绍几个在线数据存储网站。
1)永硕E盘www.ys168.com
永硕E盘是一个中文版的在线文件存储分享服务网站,使用前的注册也非常简单方便。
用户注册永硕E盘成功后即可登陆空间,空间的登陆地址为:http://用户名.ys168.com(用户名是您注册时填写的用户名),在地址栏内输入此地址即可登陆。他人也可以访问你的空间,如果您要限制别人访问您的空间,您可以在空间常规设置里设置登陆密码。在永硕E盘里,您可以增加目录、上传文件、增加链接地址以及留言、个人文件存储、公司内部或公司之间文件传递交流等。永硕E盘的特点是:系统稳定,反应迅速,界面简洁,易操作,支持各种类型的文件,80M免费,付费空间和免费空间的服务器完全分离,免费用户使用的是共享带宽,付费空间用户使用的是独享带宽,在网络高峰期时付费用户的网速更有保障。
2)网易网盘www.163disk.com
网易网盘内置于网易126(www.126.com)和163(mail.163.com)免费邮箱当中,因此网易的免费邮箱用户将会方便获得该项服务。网易网盘在安全方面采用高品质的HP(惠普)海量磁盘阵列、JAVA前端应用和Cluster系统架构,以及专门保护数据安全的HP RAID ADG技术,再加上身份和密码双重安全验证,其安全性能远远高于U盘。另外,网易网盘配备国际顶尖的卡巴斯基杀毒引擎,免费提供实时升级的超强反病毒服务。而使用U盘的用户,一般都需要额外花钱购买杀毒软件。由此可见,网易网盘大大超越了传统U盘的性能,因而被形象地称之为“U盘终结者”。使用网易网盘,不需要重新注册,只需用现有的163邮箱的帐号登录即可。下面我们以网易网盘为例具体介绍一下使用方法。
登录163邮箱后,点击网易网盘,如果没有开通,可以用邮箱的积分获取,点击“马上兑换”,开通自己的网盘,页面会提示:“恭喜,升级成功,退出邮箱系统,再次登录,即可使用网盘”。网易网盘开通后,登录邮箱再次点击“网易网盘”,就会发现它的界面非常简单,已经为你默认建立了“我的文档、我的多媒体、我的图片、我的音乐、我的软件等文件夹,你可以按照文件类型把文件保存到相应的目录里。如果还想增加其它的类型,可以点击“新建文件夹”。除此以外,还有常用的按钮:上传、下载、删除等。我们以上传为例简单说明一下:点击“上传”按钮,页面转换到新的界面:上传位置:从右边的下拉菜单中选择“文件类型”,我们选择“我的音乐”;添加文件:点击添加文件按钮,会弹出一个“选择文件”的对话框,从本地硬盘中选择好文件,如“爱情诺曼底.mp3”,可以添加多个文件;重新命名:可以对要上传的文件重新起名字,但多个文件上传时,不能使用这个功能;最后点击“上传文件”就ok了。
另外我们可以将网易网盘里的文件发送给朋友:
·点击写信页面的“网易网盘”链接;
·在跳转的网盘文件列表页面选中你需要发送的文件;
·点击“确定”,回到写信页面继续编辑邮件;
·轻轻点击一下“发送”,就可以将选中的文件作为邮件的附件发送给你的好友
3)联想在线数据中心www.lenovodata.com
联想在线数据中心分为存储分享个人版和专业版,个人版提供超大容量的免费存储空间有5G,刚申请时只有1G,以后每天增加10M,直到5G为止。测试时速度也不错。超大容量免费存储空间的容量可以按需扩充。另外,可以批量文件传输,支持多级目录和断点续传,用户完全控制数据访问权限,多种途径实现数据共享,联想在线数据中心存储的数据永久有效,是文档多媒体资料保存的理想场所。
4)微软在线存储服务www.Foldershare.com
微软推出的在线存储服务,与普通的在线存储相比较,它不仅提供普通网络的存储服务,更多的是提供一种文件共享服务。它具有三功能:文件分享、文件同步和远程访问自己的电脑三在功能。
好友分享是微软在线存储非常主要的一个功能。点击:share with friends”可以和朋友共享文件、照片和家庭视频等。具体操作是选中想要共享的内容、邀请对象,他们就可以直接从他们的电脑进入所共享的文件。虽然用户可以和任何人共享文件,但是那些被邀请使用共享文件夹的用户首先要注册一个Windows ID才能通过验证。
同步文件功能允许在两台或者多台电脑上对特定的文件夹或者选定的盘符中的文件进行同步,在其中一台电脑上修改文件,另外一台电脑的文件相应地改变。为了更好地使用这个功能,需要创建一个对等网络peer-to-peer,使用该功能,可以在家里找回工作时的文件,接着工作,也可以工作时访问家里的文件,而没有必要使用或者携带U盘或者移动硬盘,但前提是,工作电脑和家用电脑都能上网,而且都运行了这个软件。
远程访问功能大家都不陌生。微软在线存储服务也提供了这个功能,它允许你从任何一个网络浏览器访问你的电脑。在其它地方使用帐号和密码登录后,就可以对你的电脑进行操作了。
另外,我们可以使用免费的在线照片存储服务Flickr,SnapFish和PhotoBucket,免费的在线音乐存储服务MP3Tunes和MusicPlayer.FM,免费的多用途的存储服务如Box.Net。进入21世纪,信息产业的突飞猛进和网络引发的信息爆炸带来了信息存储和保护的一些问题:如因系统升级、故障及停电、灾害等原因难免导致业务中断;在恢复数据时又时常遇到数据不易于管理查找、备份繁琐、恢复能力差等问题。以上这些问题的出现,为全球的信息存储业提供了巨大商机。对于想在网络上存储其照片、音乐和其他文件的用户来说,现在有很多存储服务可供选择:其中一些可以提供免费的服务,另外一些收费服务则可能提供更大的存储空间、安全功能和其他一些功能。想知道以后人们是怎么使用电脑的,你可以设想一下:把图片到视频的所有软件和数据,都存储在网络上。这使得我们同样可以从家中的电脑、公众网吧,或者具有上网功能的手机获得这些数据。有兴趣的朋友可以去试试吧。
摘要:随着信息技术的发展,网络中的视频、音频的内容更加丰富,人们工作、生活中需要存储的多媒体数据日益增长。信息社会带来了信息存储和保护的一些问题:电脑很容易受到硬盘驱动器崩溃或病毒的攻击;数据备份繁琐;数据发生故障时恢复能力差等。在线数据存储这几年得到了快速发展。在线数据存储是一种技术,可以让使用者的资料存储在互联网上。在线数据存储不仅提供了额外弹性源,供存放资料,而且还可以作为备份机制,并提供了有效的方法共享数据给别人。
关键词:计算机,信息,网络,存储,在线数据存储
参考文献
[1]段三立.在线数据存储—你用了吗[J].中小学信息技术教育,2009(1):82.
数据流存储 篇2
Gartner认为,到了,当前50%的数据中心为了满足高密度设备要求,都将面临电力短缺,无法得到充足的能源供给。随着能源需求持续增长,到了,超过70%的公司会发现,数据中心能耗将成为他们的第二大运行成本。
在最近美国高层公司举行的民意投票中,76%涉及数据中心采购的行政部门都表示节能产品将成为采购首选。
Nexsan公司也深信,节能技术将极大地影响存储行业的竞争格局。 Nexsan的SATABeast存储阵列,以其高密度和高容量奖美国“低二氧化碳未来”奖项。最近,又在英国获得Techworld 的“年度绿色产品”奖。Techworld奖项旨在认证和奖励业界高标准的成就,每年超过200个认证项目,可视为计算机行业的基准之一。
Brendan Kinkade, Nexsan市场部的副总裁,在获得“绿色存储产品”荣誉后,表示:“SATABeast存储系统提供的节能功能能够得到认可,我们感到很高兴。”Nexsan的AutoMAID节能技术的应用,使SATABeast不仅具有能够确保数据自有存取和安全存放的强大功能,而且每TB存储耗电量只有传统的存储阵列的十分之一,从而降低了总的操作成本和年复一年的碳排放量。
当问及Nexsan的绿色存储方案和其它存储产品的主要区别时,Brendan Kinkade提到,很多存储产品在迎合绿存储需求时,不改变产品的设计,只通过加载高容量磁盘以增加存储密度。而对于Nexsan,节能是产品的关键特色,从产品构架设计为起点,逐环节将其节能技术在产品研发过程中嵌入到产品系统中。当今,TCO成为消费者为其数据中心选取设备时的关键因素的市场环境下,Nexsan的低操作成本,优化性能解决方案,具有极大的优势。
Nexsan 产品的两大节能设计点
一,高密度存储系统SATABeast
以下是SATABeast高密度阵列与传统阵列的对比表,从中我们可以看到,SATABeast高密度存储阵列可以:
降低能源消耗
降低制冷要求
节省空间
节省开支
降低操作成本
降低二氧化碳排放
提供近期ROI
能源管理DDD用户可自行设定能源管理的级别,优化存储、性能比率。
级别1:磁头卸载,节能15%-20%,次秒级的恢复时间
级别2:磁头卸载,磁盘运转降为4000RPM,节能35%-45%,15秒的恢复时间
级别3:驱动器指针停止旋转,节能 50%-70%,30秒的恢复时间
例如,42TB的存储量闲置时需要耗能620瓦,而在AutoMAID选定3级时,只需不到250瓦。
系统管理
因其能灵活地同时提供光纤和iSCSI环境,且效率是其它传统存储阵列的10倍,SATABeast在降低总体运行成本和年复一年地二氧化碳排放的同时可以确保数据的可访问性和安全性。[next]
二,AutoMAID 节能技术
Nexsan不仅提供了高性能、高容量的RAID存储系统,也提供AutoMAID节能技术。AutoMAIDTM 节能技术使SATABeast磁盘置于闲置状态,从而节省能源并同时具备快速访问速度,AutoMAIDTM 技术是以一个单一硬盘为控制单元,用户可自行设定能源节省级别。
AutoMAID 节能技术对MAID的有效,自动的设置,能节省能源和提高操作性能,且100%的负载循环存储。它能自动降低处于闲置状态的磁盘的能源消耗,而且对主机透明,无需任何软件的修改。磁盘自动进行周期性的磁面扫描,以确保数据的完整性。
就Nexsan存储阵列各方面而言,使用Nexsan公司自身先进的技术,AutoMAID是一项标准节能技术,不收取额外费用。
基于AutoMAID的SATABeast绿色存储平台
Nexsan的革命性的AutoMAID节能技术在显赫于其它MAID系统的性能承诺的同时,极大地降低了能源消耗和操作费用。SATABeast以其极速的性能提供了双重功效的光纤通道和iSCSI连接线,
灵活,可延展性,完全独立的OS,使SATABeast极为容易地提供一个大范围的存储平台。
通过AutoMAID技能技术实现的能源和资金节省。
每英寸机架的高密度DD每一个机架单元可容10.5个驱动器
完全独立的OS设计,无需任何特殊驱动软件
高性能DD可提供700MB/S以上的持续访问速度
SATABeast高速的在线访问速度可达到磁带的500倍,其它MAID系统的20倍
所有独立组件均冗余并可热拔插
WorldviewDD提供从单一GUI管理和配置多台磁盘阵列的能力
高度IOPS性能DD所以的42个磁盘都可同时应用。
节能功效
双重控制器是通过Nexsan获奖的SATATM系统,来提供极速的线性访问量,其中的42根轴可被分为多样的RAID集合或看作一个大容量的存储池。
Nexsan的AutoMAID节能技术与高性能,多用途的SATABeast存储阵列的结合使用户能灵活地在同一个存储子系统中支持多样存储应用,AutoMAID降低了SATABeast的能源消耗,每万亿字节的存储量仅需11瓦。AutoMAID节能技术使用户可根据自身需求自行设定,它不仅作用于整个系统,也可作用于单个的RAID集合甚至单个的磁盘。
方案配置
置于SATABeast控制器中的Nexsan管理接口使用户无需增加额外的服务器,或增加管理存储阵列的应用。这种精密的管理工具通过一个10/100/1000M以太网口全面监控和报告所有子系统的状况,包括在Nexsan里的还有Tele-GuardTM功能,Nexsan的回拨功能,使用户可获得故障通知或故障预警。Worldview提供了全方位管理功能。LUN Mapping 功能让用户更容易地为一台或多台服务器配置大容量的存储空间。
SATABeast的所有独立组件均冗余并可热拔插。SATABeast系统能支持多样级别的RAID,甚至RAID 6, 确保数据不丢失。同时,SATABeast的全功能缓存设计使其即使在断电的情况下,也可保证数据的完整性。
SATABeast使用户可灵活地运用光纤通道或iSCSI连接,或二者同时应用。所有的系统功能都可极为容易地通过一个简单,直观的图形用户界面进行配置和管理,并且能与任何网页浏览器兼容。灵活,可延展性和操作系统的完全独立,SATABeast以其快速访问性能提供了双重功能的光纤通道和iSCSI连接。
适用性
高性能存储阵列能使能源消耗降低52%。SATABeast再次界定了存储系统所能提供的能耗降低水平。可靠性是企业级环境存储器的必要条件,SATABeast所有活动组件都具有高度可用的系统功能并且均冗余。超高的读写传输速度和IOPS性能,使SATABeast成为高密集数据访问应用的最佳选择。它无与伦比的高容量和节能技术使其成为二级存储和D2D(盘对盘备份)的理想选择。在线访问数据代表良好的业务连续性。
SATABeast提供了高速度,高故障容忍和高可用性的高级数据保护方案,同时,SATABeast无与伦比的超大容量可轻松处理超大文件卷。SATABeast使大量空前的数据实现了高性价比存储和即时访问。
Nexsan提供了首要的,也是仅有的高性能高容量的RAID存储系统,进而提供了MAID节能技术。SATABeast采用了Mexsan研发的具有革命性意义的AutoMAID节能技术,可将SATABeast磁盘置于闲置状态,以极大地降低能源消耗和运行成本。 AutoMAIDTM在提供MAID成本节省的同时却不会牺牲访问速度,而且无需特定主机软件。Nexsan的AutoMAID技术是以单一硬盘或 RAID卷为控制单元,并提供多层面的能源节省,用户可自行设定所需访问速度和节能程度,AutoMAIDTM 是第一个支持VTL,全文件格式和标准高性能RAID功能的MAID架构系统。
SATABeast成功案例
英国图书馆与微软公司的一次大项目合作中,将其成千上万的历史书籍和手抄本数据化,并通过一个新的名为MSN书籍检索系统,将这些数字化信息展现给世界。
他们已经决定选择Nexsan公司的SATABeast作为其存储系统。目前,有超过300TB的Beasts正在运行中,并且有待进一步扩展。他们之所以选择Beasts,正因为其AutoMAID节能技术。SATABeast模块的可延展性及更低的每TB存储量价格,都使 Nexsan打败Copan而获胜。
SATABeast也取代了当前的HP EVA存储器,而被用作图书馆数字化信息管理项目的存储平台。在这个项目中,图书馆接受并存储英国,爱尔兰出版物的电子版本,同时也广泛地从世界各地购买素材。
大数据商机:云存储 篇3
如果3000多年前商朝的史官穿越到今天这个时代,他们一定会产生一种对信息数据的眩晕感。
这是一个数据爆炸的世界,人类从未像今天这样随时随地地创造数据。有统计称,现在全球一天创造的数据相当于过去几百年创造的数据。我们可以在互联网上搜索、聊天、购物、摄影、看视频、听音乐、写文档……现在BAT(百度、阿里巴巴、腾讯)各自处理的数据量已达到100P(1P=1024T,1T=1024G))级别。据说淘宝和天猫每天新增的数据量,能让人连续不断地看28年高清电影。
随着数据量的与日俱增,如何方便、安全地存储信息就成了人们考虑的问题。在随处是“云计算”的“云时代”,人们纷纷将数据搬到云端。数据云端化趋势催热了存储市场,各种云存储产品纷纷落地。
“云计算”催热“云存储”
2002年左右,陈进才所在的研究团队正从事一项数字电视台研究,需要存储高清的数字电视信号,当时主流的硬盘大小只有几十“G”(1G=1024M),无法满足存储需求。陈进才想到的办法是,将几个小容量且便宜的硬盘组合成为一个磁盘阵列,每个磁盘阵列大小为1T,总共用了四个这样的磁盘阵列。
“现在在京东、淘宝上很轻易就能买到几‘T’大小的移动硬盘。”回想起12年前的存储条件,陈进才感叹道。计算机科学出身的陈进才现在是华中科技大学光电国家实验室信息存储与光显示功能实验室的科学家,专注于信息存储的基础研究工作。
“硬盘是信息存储历史上具有里程碑意义的发明。我最早使用的硬盘大小只有几十‘M’,现在几百‘G’、几‘T’容量的硬盘都很常见了。”陈进才的硬盘使用史大致与硬盘发展史相当。
不过现在,陈进才可能要跟硬盘说拜拜了。人们逐渐将数据搬到云端,而不是硬盘、U盘或者光盘,而这一切都拜“云计算”这个时髦词儿所赐。
“计算和存储是两个密不可分的概念。人们在计算什么?数据。计算的结果是什么?还是数据。只要是数据,都需要有一个场地,这就是存储。”陈进才说,“以前学术界和产业界对计算的投入较多,所以云计算才发展这么快,不过紧接着云存储又落地了,现在网盘已经走进了人们的生活。”
人们日常使用水、电,只要拧开水龙头、插上插头就可以用了,并不需要知道所使用的水和电来自何方。事实上,水、电来自不同的水厂、电厂,并纳入统一的水电供应网络中。云存储也是一样的道理。以前,人们知道一个文档存储在U盘、光盘、硬盘当中,现在数据走向云端,人们不知道数据究竟存储在哪里,但这并不妨碍人们随时随地使用数据。
云存储技术的出现是符合时代发展需要的。这是一个大数据时代,生活在这个时代的人跟商朝史官的最大不同是,人们能随时随地记录和保存自己的历史。人们记录个人历史的方式各式各样,产生的数据诸如文字、语音、照片、视频、消费记录、搜索记录等,五花八门。特别是智能硬件兴起以后,各种可穿戴设备正马不停蹄地记录我们身体的数据。个人拥有的数据量与日俱增,传统硬盘已经无法满足需求,云存储适时出现,缓解了存储压力。
这又是一个移动互联网时代,人们随时随地都在使用PC、笔记本、手机、平板等多种终端设备,而这些设备之间的数据同步和共享问题也日益突出。人们使用数据的场景日益丰富:工作时在单位的PC上办公,有时又需要在其他终端上查看数据;用手机拍摄了照片、视频,想在PC或者电视的屏幕上观看。传统的解决办法是用U盘、移动硬盘等存储介质转移数据,但使用起来总是不便。一旦终端设备或者U盘、硬盘损坏或丢失,造成的数据损失无法弥补。云存储技术则很好地解决了数据同步和共享,给用户带来便捷。
据思科公司发布的《思科全球云指数:2013-2018》报告预测显示,到2018年,全球将有78%的数据量会在云端存储和处理,只有22%的数据会在传统物理介质中存储和处理。对此,陈进才表示:“具体的比例我无法评价,但是数据云端化趋势是明显的,这个预测大方向是对的。”
云存储应用无处不在
正因为数据无处不在,所以云存储也无处不在。近两年,个人云、家庭云、企业云、行业云等各式各样的“云”纷纷问世。
对家庭来说,照片是最值得回忆的纪念。360云盘就打算把用户的照片作为未来发展的重点。“照片对用户来说是很重要的数据。我们想把用户的照片都备份到云盘中,避免用户手机、电脑故障时丢失照片的情况。以后用户也可以在手机的云盘或相册内看到这些照片,实现无障碍查看,且不占用手机存储空间。”360云盘产品经理刘航对《支点》记者说。
云存储的好处还在于能突破传统U盘物理时空的局限。比如人们拍摄了照片,将照片保存并分享到云存储,远在老家的爸妈可以瞬时查看这些照片。类似的使用照片数据的场景很多,而家庭云存储则能很好地满足家庭成员在不同地区、不同场景下查看照片的需求。
随着物联网建设的推进,家庭智能化也逐步实现。“一个家庭就是一个物联网系统。现在家里一般都有好几台移动设备,还有其他的智能设备,比如空调、电视、冰箱等。对这些智能设备的控制、需求都会产生信息数据,而有数据就需要存储配置。家庭云存储能够把这些电子设备共用起来,建立在一个共同的平台上,从而达到数据同步和共享的目的。”陈进才认为,家庭云存储前景广阔,“按照现有技术,家庭云存储很快就能够推广开来。”
云存储在智慧城市建设中也应用广泛。比如城市智慧交通,有了云存储,交警可随时在个人终端上查看道路交通信息。比如智能安防系统,由于要存储大量的高清监控视频,传统的存储方式根本无法满足。云存储不仅能存储大量视频,还能让用户随时随地调取视频数据。又比如在智慧医疗中,云存储平台将人们跟医院等健康机构联系起来。各种可穿戴设备记录人们身体的数据,并实时将数据上传到云端,医生则可随时查看数据并提出指导意见。
nlc202309041205
类似的云存储技术应用还有很多,未来云存储将在智慧城市的各个细分领域都将得到长足发展。据IDC的《2020年的数字宇宙》报告预测,到2020年数字宇宙的规模将达到40万亿GB,其中40%的数据将会在云服务商那里被存储或处理,15%的数据将始终存储在云中。
业内混战跑马圈地
尽管云存储市场空间巨大,但无论是美国,还是中国,云存储行业还处于起步阶段,市场中还没有形成占绝对优势领头羊的局面。
比如在美国,不仅苹果公司推出iCloud云存储服务,其他巨头如谷歌、亚马逊和微软也纷纷角逐云存储市场。而Box这样的初创公司也开始与大牌公司Dropbox(世界上最大的云存储服务公司之一)抢市场。一时间,美国云存储市场好不热闹。
国内云存储市场也热闹非凡,互联网巨头和初创企业纷纷在云存储市场上跑马圈地,并没有哪一家处于很明显的优势地位。网盘作为针对个人用户的一种云存储产品,尤其受到青睐。百度云盘、360云盘、微云、天翼云、115网盘、金山快盘、华为网盘、新浪微盘,都在使出浑身解数,积攒人气。
“现在PC没落了,移动设备越来越普及。云存储可以备份终端设备中的重要资料,防止丢失,各个终端之间也可以同步和分享数据,给用户带来便利。另外,手机制造商也想用云存储黏住用户,资料备份在他们的云存储里,用户换品牌的机会就变少了。”刘航向《支点》记者解释了为什么云存储会引发起众多互联网公司的兴趣。
热闹归热闹,陈进才从热闹中看出了些门道。在他看来,目前国内的云存储服务提供商还处于聚集用户的初级阶段。“通过提供免费的大容量的网盘服务,达到聚集大量用户的目的,再通过提供增值服务收费,比如扩充存储容量等。”
“企业这么做也很无奈。毕竟云存储刚出现,消费者心里没底,如果一开始就收费的话,用户肯定不买账,免费则符合国内用户的心理。”陈进才认为,国内云存储服务提供商还需慢慢探索更有效的商业模式。
刘航也坦言,360云盘还没有找到有效的盈利模式,处于用户积累期。不过他坚持认为:“好的基础服务应该是免费的,未来我们也不会向云盘用户收费。”
陈进才建议,云存储服务商应转向企业级用户要利润。“企业有时会存储大量数据,所以迫切需要云存储。”当然企业可以自建私有云,但云存储技术门槛很高,需要企业投入大量资金购买存储硬件和软件设备建设云存储平台,还得请专业人员运营和维护这一平台,成本投入较大。当然企业也可以把这些工作交给专业的云存储服务商,这就给国内云存储服务商们带来了机会。
未来存储将生物智能化
人类自文明诞生以来,就一直在探索存储信息的方式。从结绳记事到龟甲兽骨,从莎草纸到竹简丝绸,从纸张到软盘,从硬盘到光盘,从U盘到云盘,信息存储能力在越来越强、越来越便捷的同时,人们也越来越注重存储的安全问题。
艾媒咨询在去年底发布的《2014中国个人云存储行业及用户行为研究报告》显示,80.3%的中国网民会选择用U盘存储文件,只有33.6%的网民会选择云存储产品存储文件,同时还显示,有59.6%的网民在选择云存储服务时比较关注存储的安全性。
安全的云存储对用户使用习惯的形成至关重要。一说到“云”,总给人一种虚无缥缈的感觉,用户对于云存储也有这样的感觉。跟U盘存储不一样,数据云端化以后,用户不知道数据究竟存储在哪里,从而对云存储的数据安全产生担忧。
云存储,究竟安不安全?去年闹得沸沸扬扬的好莱坞女星艳照门事件,不禁让人们对云存储安全性产生怀疑。女星的艳照就是从苹果公司的云存储服务iCloud中流出的。
刘航解释说,iCloud泄漏是因为苹果公司对iCloud账户登录没有限制,允许用户反复重试密码,黑客利用这个漏洞开发软件穷举各种密码,从而破解账户盗取文件。
刘航认为没有绝对的安全。要提高安全性能,一方面云存储服务商本身要将安全措施做到极致;另一方面用户也要提高自身安全意识。
陈进才认为,安全问题是目前云存储推广的最大障碍之一,但用户没有必要因此就排斥云存储。“以前我们去银行柜台存钱就觉得安全,而在网上交易则觉得不安全,可现在大家普遍都在网上转账、付款。请给云存储一点时间,未来云存储的安全体系会越来越先进。”陈进才对云存储的未来充满信心。
当然,云存储也并不是人类存储信息的最终形态,事实上云存储的数据依然存储在硬盘上。刘航认为,未来肯定会出现更为先进的存储技术,比如蛋白质存储器。据悉,一个蛋白质存储器的存储容量可达5万GB,与传统光盘相比访问数据的速度更快,且在无电源的情况下还能存储数据。
“互联网预言帝”凯文·凯利在《失控》一书中认为,人造事物和天生事物正在联姻。他说:“机器,正在生物化;而生物,正在工程化。”蛋白质存储器正是生物工程化的体现。未来,蛋白质存储器很有可能会成为继云存储以后存储市场新的增长点。
依靠存储技术,人类知识得以传承。毫不夸张地说,未来人类文明的延续,存储技术的进步至关重要。(支点杂志2015年3月刊)
网络数据流存储算法分析与实现 篇4
网络数据流是由有序字节流组成, 字节流以报文为基本单位在网络中进行传输, 并且报文之间通常具有一定的状态联系和制约关系。关于网络数据流目前尚无统一的定义, 大体上可以把网络数据流研究分为二个方向:面向宏观的网络数据采样和面向微观的网络数据存储。数据流采样是通过定期采集网络数据流, 提取网络报文报头的特征, 实现对于网络状态分析。如 Cisco 的 Netflow 在高速网络上使用“k 取1”方法, 分析网络数据流特征使用动态采样方式提高 Netflow的精确度[1,2]。但是由于网络数据流采样时间粒度的限制, 错误地把几个不同的TCP连接聚集到一个 Netflow 中, 出现采样记录的连接数少于实际的 TCP 连接数的情况。网络数据存储主要集中在应用层, 如以 Squid 为代表的 Web cache 网络数据存储技术, Web cache 通过资源预取、缓存, 来提高客户端的响应速度, 节省带宽资源, 同时提供基于内容的资源传输管理[3]和多级缓存节点的资源协同管理等[4,5] 。但是以 Squid 为代表的 Web cache 是一种以 Object 为基本存储单位 Web Proxy 技术, 尽管 Squid 增加对部分应用协议的扩展功能, 但是仍然局限于少数的几种应用协议。
目前对于网络监控、安全预警等方面的应用, 不仅需要对网络流量进行整体的统计分析, 而且需要对每个连接状态进行记录、跟踪, 最后作出安全决策。因此如果能够实现对网络数据流的实时复制、存储, 不仅可以对关键网络业务进行精确的检测、跟踪, 而且能够实现对关键业务的备份和恢复。但是网络数据流的实时存储, 是一个在线存储过程, 面临着诸多瓶颈问题, 可以归纳如下: (1) 实际存储率低。由于网络数据流具有突发性和自相似性[6], 并且在传输过程中具有乱序传输特征[7], 加上实际存储时内存读写带宽与磁盘读写带宽的不匹配等原因, 会出现接收到数据包, 但没有实际写入磁盘中丢包现象, 造成实际存储比率低下。 (2) 缺乏有效的磁盘管理机制。传统的数据流复制, 通常是按序直接写入文件中, 不利于数据流的检索和查询。网络数据流的实时存储, 不仅需要较高的报文捕获能力, 而且更关注于网络数据流完整的复制、数据流状态维护以及磁盘数据管理。本文根据网络数据流特点提出网络数据流分段存储模型, 本模型包括基于内存的高速缓存结构和基于磁盘的多级索引结构。
1网络数据流存储模型
网络数据流存储是一个从网络数据流复制, 内存缓存, 再到磁盘文件管理的一个相互联系的复杂的过程, 为了说明方便, 首先进行如下的相关定义。
定义1 时序性 二个网络数据包a、b, 如果a 在网络传输中位于b 的前面, 即a 在时间轴上位于b 的左侧, 则称此时a 在时序上早于b, 表示为a<<b。
定义2 强时序性 设原始网络数据包序列为…l1, l2, m1, l3, m2, n1, n2, n3, m3, …, 如果数据包之间的时序性被严格地保持, 则称为数据流具有强时序性。
定义3 弱时序性 设数据流分段为 p1, p2, p3;p1= (l1, l2, l3) , p2= (m1, m2, m3) , p3= (n1, n2, n3) 。尽管p1, p2, p3 所包含数据包并没有严格的时序性, 但是每个分段的第一个数据包之间具有严格的时序性, 即l1<<m1<<n1, 称p1, p2, p3 之间具有弱时序性。为了衡量网络数据流分段后的与强时序的误差引入下面的定义。
定义4 弱时序性网络数据流的时间误差和秩 如果上例中把p1, p2, p3 数据流分段包含的数据包依次排列, 形如l1, l2, l3, m1, m2, m3, n1, n2, n3, 与原始数据流在时间上的最大的差值, 此例中的最大的差值可能发生在m3 与n1之间。把具有弱时序性的数据流分段中的数据包重新排列后, 与原始数据包序列进行比较, 其中任意二个数据包之间最大的时间差, 称为数据分段后的时间误差, 并把每个数据流分段包含的数据包的个数称为秩。
定义5 网络数据流的属主性 网络数据流通常具有明显的起始点 (源端) 或者终止点 (目的端) , 把这种性质成为网络数据流的属主性;网络数据流的属主性, 在不同应用场合使用不同的参数进行描述, 如 Cisco 通常使用七元组描述网络数据流的属主信息, TCP Session 中采用五元组描述网络数据流的属主信息。在某些场合也可以使用逻辑意义上的参数描述网络数据流属主信息。
通过上面的定义, 可以把网络数据流存储面临的基本问题描述为:如何在兼顾网络数据流属主性和时序性的前提条件下, 根据网络负载调整磁盘读写策略, 提高报文复制效率;如何为网络数据流建立体现时序性和属主性的双重索引结构, 提高磁盘数据管理效率。
由于传统模式下的按序复制、按序存储、限制磁盘读写策略, 增加了磁盘数据管理的难度。本文通过构造属主内保持强时序性、属主间保持弱时序性的数据流分段, 对构造后的网络数据流分段进行集中写入磁盘、集中建立索引等方式, 来解决传统网络数据流存储面临的问题。数据流分段之间的弱时序性是通过分段之间误差参数来控制的, 无论是网络协议栈还是网络应用程序都具有一定的时延容忍能力。例如默认的TCP 缓存区的大小是8KB, 如果能够保证各个弱时序性的分段秩小于14, 可以实现在不改变 TCP 语义的条件下, 进行网络数据流属主间的分段重组。为了实现网络数据流分段重组的目标, 本模型在内存中采用同时保证属主性和弱时序性的高速缓存结构, 在磁盘中对数据流分段建立数据流生成树的多级索引结构。
2相关算法的描述
2.1基于内存的网络数据流分段重组算法的描述
内存中的分段重组是通过散列表和循环队列实现的, 算法中的散列表保存的是不同属主的网络数据流存储位置的信息, 把同一属主内的网络报文经过散列运算后依次保存到同一个队列节点指向的数据流分段中, 通过散列运算保证网络数据流的属主性;循环队列中保存的是满足弱时序性的数据流分段, 对每个新到达的不同属主的数据流依次在队首开辟缓存空间, 而守护进程在队列尾部进行数据流分段的转存, 整个缓存和转存的过程是通过FIFO方式保证弱时序性的。对每个数据流分段之间的误差是通过每个分段的最大时间误差和秩来控制的, 当一个数据流分段超过时间误差或秩的最大限制, 设置分段满的状态标志, 表示不在本分段内继续缓存数据包, 等待守护进程进行转存数据流分段, 当仍有同一属主的网络数据流继续到达时, 重新在队首开辟缓存空间。
为了实现动态磁盘读写调度策略, 这里把循环队列分为三 个区:空闲区、工作区和转存区。空闲区是可利用的空闲队列资源;工作区是经过散列运算后, 正在写入的网络数据流分段, 工作区长度等于同时进行存储的不同属主的网络数据流数量;转存区是满足弱时序性的等待写入磁盘文件中的数据流分段, 通过观察转存区长度可以了解当时的网络流量情况, 动态调节磁盘读写速率。
算法的基本过程描述如下:
Step1 把客户端和服务器的 IP 地址经过散列运算, 得到在散列表中的表节点的索引值。如果散列表节点中没有记录, 并且冲突表为空, 在循环队列首部开辟新的队列节点, 把节点指针填入到散列表中, 进行状态记录, 把数据包数据按序插入到数据流链表结构中;如果散列表节点中有对应记录, 则取出队列节点指针。
Step2 通过队列节点的状态标志判断每个队列节点的使用状态。如果内存守护进程正在转存该节点数据, 表示内存守护进程正在转存该节点的数据, 则需要在循环队列头新开辟队列节点缓存空间, 并与散列表建立关联;如果节点为空或者正在被写入并且没有满, 表明该队列节点可用, 按序插入数据报文, 并在分段头信息中设置相应的属性值, 如果分段秩大于等于N, 设置分段满标记, 表明已达到最大数据流分段的误差, 等待内存守护进程进行数据分段转存;
Step3 在每个数据流分段转存周期内内存守护进程从队列尾部开始转存数据流分段。根据队列节点的属性值判读节点工作状态, 同时根据转存区长度‖tail-rear‖, 判断当时网络负载情况, 动态地调整转存周期的时间间隔。
Step4 定期清理散列表, 设置一个全局回收周期, 在回收周期内没有收到数据包, 则在散列表结构中清除对应项。
通过上述相关数据结构的描述和算法分析, 可以看出弱时序性的网络数据流存储结构在保持网络数据流的属主性和时序性的双重属性的前提下, 实现动态磁盘读写调度策略。对属主性的维护通过散列表实现, 对网络数据流的时序性维护通过队列的 FIFO 特性实现, 通过循环队列的分区处理, 达到对多属主数据流存储和动态调整的磁盘读写策略。弱时序性缓存结构产生的数据流分段是相同属主的网络数据报文并且报文之间具有严格的时序性, 为数据流磁盘管理提供了合理的结构。
2.2基于磁盘的网络数据流生成树的结构描述
对于由高速缓存结构产生的数据流分段, 使用数据流生成树的多极索引结构进行存储。数据流生成树是通过改进B+树来实现的。数据流生成树分为内节点和叶节点, 内节点记录索引结构数据和子树指针数据, 叶节点记录索引结构数据和数据指针数据, 数据指针指向每个分段的存储位置。数据流生成与B+树的区别是每个节点不再有最多子树的限制, 可以根据需要任意扩展子树的数目。数据流生成树不再局限于只有每个叶节点之间有兄弟指针, 内节点之间同样具有兄弟指针, 数据流生成树的高度共有五层, 每一层具有明确的逻辑含义。
设根节点为第一层, 根节点记录在一段时间内与所有Server 的通信记录;
第二层:记录每个Server 和不同的Client 之间的通信信息;
第三层:保存每个客户与服务器完整的会话的数据信息;
第四层:保存每个会话被分成的各个数据流分段的基本信息;
第五层:每个数据流分段的基本数据信息, 此时相邻数据流分段的最大时间差为最大时间误差, 每个数据流分段秩为N。
从分析可以看出, 整个数据流生成树的内节点实际上是由多级索引构成的索引树, 索引树由上到下时序性越来越强, 但是属主性越来越弱。由于网络数据流生成树在所有的内节点之间增加兄弟指针, 如果要实现针对某个节点的动态维护操作, 则整个索引树维护起来会十分复杂, 并且有些操作对于网络数据流也失去实际意义, 因此对网络数据流生成树的操作进一步限制。数据流生成树的操作仅限于数据流分段的基于状态插入和基于时序性和属主性的检索和移出, 这样把多数的对网络数据流生成树的操作转换为在同一层次上按序操作, 在满足对于数据流分段管理的同时, 也体现了网络数据流的属主性。
· 数据流基于时序性和属主性的查询 对于网络数据流的查询, 常用查询是基于时序性或者属主性的查询:
(1) 需要按照时间检索网络数据流, 可以根据第五层节点的指针依次读取各个数据流分段;
(2) 需要检索某一个客户的完整 Session 的数据流, 可以根据第四层节点指针读取各个完整 Session;
(3) 需要选择与某个服务器通信的所有客户端数据流, 可以通过第三层节点的指针依次进行查找。
上述三个查询体现网络数据流的基本特征, 是网络数据流最基本的查询操作。
· 数据流分段基于状态的插入 数据流分段的插入过程, 也是树形结构的构造过程:
Step1 如果第一层节点为空, 则根据数据流分段的头关键字, 构造第一层关键字, 并依次初始化第二层、第三层、第四层、第五层索引节点, 分配存储单元, 把数据流写入磁盘;否则进入Step2。
Step2 如果第一层节点不空, 但是没有记录, 则在第一层节点增加一条新记录, 并初始化第二层节点, 并作为第一层节点的右子树, 把原来第二层最右节点的指针指向新增节点;依次初始化第三层、第四层、第五层节点初始化, 最终把数据流分段存储在新开辟的存储单元数据块中;否则进入Step3。
Step3 第一层节点有要插入关键字记录, 根据记录进入第二层节点, 判断是否是新客户端的数据流如果是增加记录, 依次初始化其余层次的节点, 并存储数据;否则进入Step4。
Step4 第二层节点有要插入的数据流段关键字记录, 根据记录进入第三层节点, 此时判断该数据段是否是Session 建立连接状态的数据流, 如果是, 新建一个第四层节点, 作为第二层节点的右子树, 同时把该节点作为第四层节点的最右节点, 其余步骤与第三步类似;否则进入Step5。
Step5 如果不是新建连接状态的数据流, 则在第三层节点从左到右依次寻找, 找到第一个没有结束的 Session 插入数据流分段, 如果是结束 Session 的数据流, 把整个数据流标记结束, 进入第四层节点。
Step6 在第四层节点中修改节点相关信息, 建立新的第五层节点, 兄弟节点之间建立连接, 并开辟新的数据单元存储数据流, 最后返回。
· 数据流分段的移出 数据流分段的移出首先要进行查找, 然后把查找到的数据流分段进行移出, 数据流的移出操作与B+树的删除操作相似, 相区别的是不需要调整树的结构, 并且需要保持层间与右相邻兄弟之间的连接。
3系统实现及性能分析
相关算法是在基于Linux操作系统下实现的, 把Linux部署为软件路由器, 在IP层进行网络数据流复制、存储。通过在内核空间注册动态的内核模块, 挂载到Netfilter HOOK函数上, 进行网络报文捕获、过滤, 通过netlink传到用户空间, 在用户空间实现高速缓存结构。数据流分片的转存工作是由基于共享内存的守护进程来实现, 转存时间在最大的时间误差范围内, 每个数据流分段秩为N。为了便于整个系统的工作过程的跟踪和性能分析, 配置系统Log文件和系统运行Trace文件 (如图1 所示) 。
在实验中分别考察在丢包临界条件下, 本模型对于高分组速率和比特率环境下的实时存储能力。在实验中使用本文设计分段的存储模型 (PKT_s) 与传统网络报文存储模式 (PKT_t) 进行比较, 通过实验结果可以看出, 本模型无论在高报文传输速率, 还是大流量的网络背景下都具有较好地实时存储能力 (如图2所示) 。
采用网络数据流分段存储模型, 可以有效降低网络数据流存储时产生的索引数据量, 比较结果如图3所示。尽管网络数据流分段存储模型对于传统的报文存储模式具有明显的优势, 但是仍然呈现出实际存储比率随着数据流量的增加而降低的趋势, 根本原因是由于数据流分段重组时, 具有时间误差和秩的限制, 影响磁盘读写带宽的进一步提高;并且在内存中需要维护高速缓存结构, 同时增加系统的开销。
4结论
网络数据流的属主性和时序性是网络数据流存储过程中需要保持的两个基本属性, 本文根据网络数据流基本特征设计并实现网络数据流存储的基本模型。本模型包含网络数据流高速缓存结构和数据流生成树的索引结构, 进一步提高磁盘读写带宽, 并在此基础上提出同时体现网络数据流时序性和属主性的双重属性的索引结构。仿真结果表明网络数据流存储模型在高分组率和比特率的网络环境背景下, 都具有很好的实时存储能力。网络数据流存储算法模型在开封仪表有限公司生产的智能仪表中投入运用, 每年带来经济效益达1500万元, 完全符合工业现场要求, 具有很大的实际意义和应用价值。
参考文献
[1]Choi B Y, Bhattacharyya S.Observations on Cisco sampled NetFlow[C]//Proc 2005 ACM SIGMETRICS Workshop on Large Scale Net-work Inference (LSNI 2005) .Banff, AB, Canada, 2005:18-20.
[2] Zhao Q, Kummar A, Wang J.Data streaming algorithms for accurate and efficient measurement of traffic and flow matrices[C]//Proc ACM SIGMETRICS 2005.Banff, Alberta, Canada, 2005:252-255.
[3] Canali C, Cardellini V, Lancellotti R.Content adaptation architectures based on squid proxy server[J].World Wide Web, 2006, 9 (1) :70-75.
[4]Aguilar J, Leiss E L.A coherence-replacement protocol for Web proxycache systems[J].International Journal of Computers and Applica-tions, 2006, 28 (1) :12-14.
[5] Sosa V J, Gonazlez G, Navarro L.Building a flexile Web caching system[C]//Proc of the Fourth Mexican International Conference.Morelos, Mexico, 2003:61-63.
[6]Piratla N M, Jayasumana A P, Bare A A.Reorder density (RD) :a for-mal, comprehensive metric for packet reordering[C]//Proc Fourth IF-IP-TC6 Networking Conference.Ontario, USA, 2005:82-86.
数据库面试题:存储过程 篇5
答:存储过程是用户定义的一系列SQL语句的集合,涉及特定表或其他对象的任务,用户可以调用存储过程。
而函数通常是数据库已经定义的方法,它接收参数并返回某种类型的值,并且不涉及特定用户表,例如聚集函数avg、max、count等,日期时间单数day、month等。
PL/SQL(Procedural Language/SQL, PL/SQL)是编写数据库存储过程的一种过程语言,它结合了SQL的数据操纵能力
和过程化语言的流程控制能力,是SQL的过程化扩展。
综上PL/SQL就是对数据的操纵过程化
存储过程的优点
它是由PL/SQL语句书写的过程,这个过程经编译和优化后存储在数据库服务器中,因此称它为存储过程,使用时只要调用即可。
1、由于存储过程不像解释执行的SQL语句那样在提出操作请求时才进行语法分析和优化工作,因而运行效率高,
它提供了在服务器端快速执行SQL语句的有效途径。
2、存储过程降低了客户机和服务器之间的通信量。客户机上的应用程序只要通过网络向服务器发出存储过程的名字和参数,就可以让RDBMS执行许多条的SQL语句,并执行数据处理。只有最终处理结果才返回客户端。
3、方便实施企业规则。可以把企业规则的运算程序写成存储过程放入数据库服务器中,由RDBMS管理,既有利于集中控制,又能方便地进行维护。当用户规则发生变化时,只需要修改存储过程,无需修改其他应用程序。
2012年数据存储五大趋势 篇6
2012五大趋势:
> 物理技术与虚拟技术间的依存度提高
> 重新思考备份
> 信息治理将成为具有积极意义的流行语
> 严酷的自然灾害考验企业灾难恢复能力
> 私有云不是“盒装云”
物理技术与虚拟技术间的依存度提高
虚拟化项目通常在初始阶段只是一个小项目,但会逐步发展成整个企业IT环境中的大项目。2012年,许多公司将会把虚拟化项目团队和其基础架构融入到企业IT环境中,这进一步突出了企业把其物理和虚拟资产作为一个平台协同工作的需求。
在最近的VMworld大会上,我们非常惊奇地看到,会上展出了许多台6英尺高的服务器机柜(一名员工站在15个不同的硬件机柜旁拍照)。这一点也能够表明虚拟化与物理硬件的相互依存。有时候,IT专家常常过于关注虚拟化,以至于忘记了虚拟化仍要依托物理硬件;有时候,一些公司一旦开始新项目,就要增加新的硬件设备,这不仅意味着更多的成本,因为结果大都是,更多的服务器或存储形成了“存储孤岛”,这反而导致了利用率下降;除此之外,采用“竖井”式方式的组织在虚拟化进程中会逐渐成为落后者,独立环境的运营成本将减缓组织从物理环境向虚拟环境转变的能力,而虚拟化带来的投资回报率会继续下降。这是因为,组织有能力为其物理和虚拟环境单独提供存储管理和备份软件的日子毕竟屈指可数。而应对这种复杂性的方法就是通过工具实现不同平台间的标准化管理,并将这一标准运用于跨越不同物理和虚拟环境的系统管理、可用性管理、备份机制、存储管理以及安全防护等任务中。
总而言之,跨越物理和虚拟环境的安全、存储管理及备份工作都将实现标准化。
重新思考备份
备份市场将一改往日的沉闷,呈现出迅猛发展的态势。这个一度被认为成熟却发展缓慢的市场,如今正在取得令人瞩目的成绩。集成了虚拟机保护的备份、重复数据删除、快照管理技术与设备、以及一些重要的操作模式上的变化等都促成了备份市场的欣欣向荣。
一些企业在虚拟环境中依赖快照而不是备份,也不实行重复数据删除或精细恢复技术,这样做的结果是用于备份和恢复的窗口会不断增多。而厂商引入的新技术将改变数据保护的方式,每年能为用户节约数百万美元。
另外,如果在每一个平台上都使用不同的备份工具,就会增加IT环境的复杂度并影响业务的持续性。而且如果企业希望转向云计算平台并且继续对基础架构进行虚拟化,他们就需要更高程度的集成。
对于那些已经部署了单独的重复数据删除技术、快照管理、磁带或磁盘备份、VMware和Hyper-V备份战略的数据中心管理者来说,下一步的重点将是简化备份流程。由于从“四分五裂”的备份环境中恢复数据非常复杂,“超级恢复平台”的概念将会出现,厂商们需要集成多种技术,以降低复杂性。
Abiquo%20Vision%20Graphic.png
信息治理将成为具有积极意义的流行语
成也信息、败也信息,关键取决于如何管理信息。如果一个企业能够很好的控制其信息保护的风险和成本,就能更好的促成新的移动互联技术、社交媒体以及云计算技术的应用。这些企业的信息资产也将成为他们的竞争优势,从而吸引最优秀的员工。
相反,不能控制、保护信息与数据的企业将被淘汰,因为缺乏对信息的管理将阻碍这些企业采用新的技术,而且他们还将在法规遵从和电子查询方面投入更多的精力。
在这种趋势下,2012年,厂商会更多的将存档、电子查询、加密、备份、数据泄露防护以及其它安全技术整合起来,帮助企业用户更好地管理信息资产。
严酷的自然灾害考验企业灾难恢复能力
近年来,全球范围内的自然灾害频发,2012年大自然将继续考验企业的灾难恢复能力。此外,人为失误、系统故障以及规划不当造成的业务运行中断事故不断地登上各大媒体的头条,使企业声誉受损。这些都使得组织比以往更有可能将其灾难恢复计划付诸实施。
我们生活在一个7×24小时不停运转的世界中,企业要持续经营,IT就需要不间断的运行。新的风险层出不穷,因此仅有一纸计划是不够的。虚拟化和云计算的出现促使IT机构开始重新思考IT策略,这给他们带来了更多压力,然而企业对这些新计划的实施速度,反映出了企业没有很好地考虑业务连续性问题。
企业需要从更全面的角度重新审视业务服务,因为他们需要更高效的业务恢复,即能实现自动恢复,能使恢复速度更快并降低对人员的依赖,而且能经受住灾难的考验。而能否做到这一点,取决于他们能否吸取过去的经验教训,真正做出改变。
私有云不是“盒装云”
“云”不是盒装产品。人们不能买了硬件就期望立刻拥有云计算环境。已经部署了云计算和虚拟化技术的数据中心管理者们通过购买硬件来实现简化。在向云计算(包括公共云和私有云)迁移的过程中,处于核心位置的业务优势包括:可扩展性、灵活性、可控性以及可衡量性。
要像云计算提供商那样来运行自己的数据中心,你需要关注人和流程的管理、关注集中管理、关注可见性、自动化、运营标准化、构建具体服务水平的产品,以及通过池化和多方租赁等方式充分利用资源,并通过Chargebacks实现问责制。但是,购买硬件并不能实现这些目标,只有改变数据中心的管理方式才能实现。
也有人表示,从大型云服务提供商那里购买“盒装云”有悖于领先的企业提供并管理其所需云服务的方式。例如谷歌(Google)和亚马逊(Amazon)等大型云服务提供商,他们从不购买特别昂贵的硬件,因为这样并不支持扩展,而是采购量产硬件。由于他们的硬件是专有的,因此,与那些开放系统和开源架构相比,在此基础上进行开发和创新更为困难,也更难实现迁移。这种方式通常是孤立的,很难集中利用资源。总体来说,这种方式也违背了IT商品化、开放化和资源池化等主流趋势,而正是这些趋势在过去十年间推动了整个IT行业的发展。
人和流程的作用在云计算环境中越来越凸显,它意味着一种文化的转变,即企业如何重新利用IT和现有资源,包括服务器、存储和人力资源。在这种情况下,企业也必须改变他们购买IT、消耗IT以及组织IT的方式来提供云服务。
{box}
2012 年虚拟化预测
我们相信从2012年起中小企业将不会再仅仅是观望或讨论IT架构虚拟化的利与弊,而开始真正行动起来,因为虚拟化将协助企业挖掘并发挥现有的服务器与存储基础架构的最大潜能。也正是如此, 虚拟化仍会成为IT业界的热点讨论话题。
而2012年也同样会使企业充满冲突与协作。当虚拟化成为一项日常作业,一些关键问题也会渐渐浮上台面,例如虚拟数据归谁所有?谁该负责备份与复原? 当虚拟服务器的数量增长,并成为企业关键性应用程序,服务器上数据的保护也成为了一个大问题。
在2012 这一年,各种规模的企业管理人员将必须接受混合式环境时代的来临。理想中的 100% 虚拟网络依旧只是梦想,即便对思想最前卫的中小企业来说,虚拟90%的IT架构仍是难题。事实上,混合式环境将持续发展,我们也将见证更多厂商转而开发新的解决方案以适应多种虚拟机 (multi-hypervisor) 和多重环境 (multi-environment)的状况。企业必须确保其备份与灾难复原解决方案能够有效地保护他们的混合环境。
最后,也很重要的一点是,我们预期微软 Hyper-V将在2012年进入中小企业市场,并直接增加微软虚拟化业务的客户量。微软Hyper-V在费用、功能以及中小企业市场占有率等方面的优势为其成功增加了可能性 。微软及其合作伙伴们正谋求这一市场,同样也为渠道商带来新的商机。
大数据时代数据存储安全对策探析 篇7
伴随着大数据时代的不断进步和发展,互联网技术、云计算、云存储以及各种网络平台的运用技术逐渐变得成熟,在这样的背景烘托下,我们对数据平台的安全技术要求也变得越来越高,大数据时代中的数据存储安全问题的重要性也变的越来越高。在目前的信息时代中,人们能利用网络方便的记载和浏览各种自己需要的信息。在保存、浏览、记录的过程中会产生如文字、音频、视频、图片等各种大量数据。然而在存储数据的过程中,会由于各种外界因素或者操作不当等造成数据的泄露,从而危及信息存储的安全,给使用者造成了经济损失。所以,数据存储的安全问题成为了大数据时代的主流探讨问题。为了确保在利用大数据时代给我们带来便利的同时避免它所产生的各种弊端,我们必须采取各种措施,不仅要在技术上,而且还要在意识上不断进行革新,进而迎接数据网络时代给我们带来的挑战。
1 大数据时代简介
大数据在各种学科例如物理学、生物学、生态学等以及各种行业例如军事、经济、信息通讯等已经发展了很长时间。目前由于互联网时代与信息时代的双层冲击下大数据平台更加受到了人们的广泛关注。传统的数据处理往往是单一的数据搜集以及整理归纳,而大数据时代中的数据处理更加注重的是对各种数据信息进行合理的搜集、分配、采集、整理并对各种信息进行高效率、高准确性、高质量的处理。随着云计算、智慧城市以及物联网等高科技技术的不断发展,大数据正在以惊人的速度不断的增长。当今时代下的各种智能手机、PC机、平板电脑的产生为大数据的到来更是准备了大量的数据信息。由此可见,大数据不仅是信息技术产业的革命,也将成为经济金融领域的霸头。以大数据时代作为依托的当代信息企业管理模式以及转型后的政府管理模式更是给人们的生活带来了便利。因而成为了社会各行各业利益驱使下的竞争地。大数据时代具有高数据存储量、高数据处理速度、多数据类型、低数据价值“密度”的特征。这使得相关的硬件设备以及软件技术都有很大的进步。大数据功能简图如下:
2 大数据时代给我们带来的存储安全问题
为了给技术工业革命以及经济社会的发展带来福音,我们需要克服伴随大数据时代而来的一些难以预知的各种风险因素。我们将从以下几个方面来探讨大数据存储安全问题:(1)数据存储成为了信息安全攻击的对象。由于现有的安全防护措施的不完善,使得一些隐藏在大数据终端的木马病毒有机可乘给企事业单位及数据服务商带来了巨大的安全危急。隐藏在信息中的木马病毒会进入工厂的安全服务系统,进而提取相关信息从而干预工厂的安全生产。这种安全信息存储的泄露使得大量有价值的信息外传,造成了很大的经济损失。(2)个人信息的泄露。大数据时代给我们带来了很多生活便利,比如购物。不仅商家可以通过网络这一销售手段进行盈利,消费者也多了更多的渠道进行购物。这种“O2O”的模式使得商家大大的降低了销售成本,对资源的合理配置更是有很大的帮助。但是在买家与卖家的交易过程中会形成很多关于资金、个人资料等的信息。这些信息都存储于大型的数据库中。一旦发生数据存储上的漏洞使得个人信息泄露,就会给消费者及商家带来不便,并引发相应的财产损失。(3)网络设施的漏洞。网络的安全性直接关乎了数据存储的安全性。软件本身的漏洞以及网站管理者的自身疏忽都会造成网络漏洞。一些由大数据时代带来的各路黑客会利用这些漏洞对信息数据进行攻击,从而造成相应的安全威胁。
3 大数据存储安全对策
面对各种安全问题的突发,制定相应的对策至关重要。
3.1 技术方面
数据安全存储问题的频发首先是大数据技术的不完善。建立一个健全的大数据安全管理体系势在必行。这种标准化的管理体系能有效的提高信息安全的管理水平以及降低信息安全的风险。面对大数据时代带来的巨大的数据量,我们必须要制定一个最优化的方案来对数据进行快捷有效的处理。开发更多的安全工具来保障系统对数据进行全方位的开发和维护。同时,我们需要不断完善网络漏洞侦查系统,对网络漏洞以及终端的信息存储漏洞进行实时监测,以便于预防信息的外漏。无论是企业单位还是事业单位的信息安全存储管理系统都必须具有高度的安全性作为保障,这样才能更加全面的执行好本单位的任务,产生良好的经济效益。比如,我们可以在公司的信息系统内增加恶意软件的拦截功能。这样可以对日常办公过程中不经意下载的恶心软件进行有效的拦截,从而避免后续安全事故的发生,有效的制止数据的泄露,保护了公司的信息财产安全。
3.2 意识方面
我们需要增强自我信息安全保护意识,注重保护自己的信息不被窃取。在进行日常的网络浏览时,对一些潜在的危机要有一定的认知,防患于未然。政府也应该对一些敏感数据进行相应的监督,加强数据平台的管理力度,避免信息泄露的风暴。同时,媒体作为大众关注的对象,应起到教育指导的作用,对信息存储泄露的危害要不断的宣传,从而帮助公民增强安全保护意识。使得人人都有网络信息安全的意识,进而减少信息存储泄露的现象。
3.3 法律方面
大数据时代的到来使得各种数据被频繁盗出,严重影响了我们的正常生活。从法律层面上来规范各种不正当的行为极为重要。我们需要从法律层面上规范个人隐私的范围,规定相应的个人信息安全尺度,避免例如盗取个人社交网络密码以及跟风的对某事件人物的搜索、曝光。这些都给当事人造成了心理上、生理上的攻击。因此,我们需要建立一套关于数据存储安全的法律体系,对于一些违法盗窃信息危害他人人身财产安全的行为进行严厉的处罚。从而为信息存储提供有力的安全保障。
4 结语
由上述分析我们得出,大数据时代的到来给当代的网络技术产业等带来革新的同时也使得公众的生活更加的便利快捷。我们在庆幸这些大数据优势的同时也要摆脱它所带来威胁。清楚的分析信息存储安全的各种问题,及时的解决各种突发事件十分重要。我们要从公民自身出发、从政府出发、从大众媒体出发不断的提高信息存储安全意识,增加信息存储安全法律知识。不断的进行技术的革新以便适应时代发展的需要,建立正规完整的法律体系对违法行为进行严厉惩处。这样才更有利于我们受益于大数据,不断的发展大数据。
参考文献
[1]王倩,朱宏峰,刘天华.大数据安全的现状与发展J.计算机与网络,2013.
[2]何国锋.电信运营商在大数据时代的信息安全挑战和机遇探J.互联网天地,2014.
[3]施恋林.当大数据邂逅网络信息安全J.通信企业管理,2015.
数据存储安全探讨 篇8
随着网络信息化的逐步发展, 数据存储已经有以往的字纸存储演变为电子数据方式的存储。现在存储已成为多个系统共享的一种资源。存储设备目前连接到非常多系统上, 因此, 必须保护各个系统上的有价值的数据, 防止其他系统未经授权访问数据, 或破坏数据已经成为企业目前需要重要考虑的问题, 有效防止企业内部和外部对数据不安全的访问造成损失, 已经成为企业目前需要解决的重中之重。
2 数据存储现状
数据存储随着企业的发展, 已经由单一地域的存储演变为网络存储。那么, 目前造成网络存储安全数据破坏的原因主要有以下几个方面: (1) 自然灾害。如水灾、火灾、雷击、地震等造成计算机系统的破坏, 致存储数据被破坏或丢失, 这属于客观因素。 (2) 计算机设备故障。其中包括存储介质的老化、失效, 这也属于客观原因, 但可以提前预防, 只需经常做到维护, 就可以及时发现问题, 避免灾难的发生。 (3) 系统管理员及维护人员的误操作。这属于主观因素, 虽然不可能完全避免, 但至少可以尽量减少。 (4) 病毒感染造成的数据破坏和网络存储安全上的“黑客”攻击。这虽然也可归属于客观因素, 但其实我们还是可以做好预防的, 而且还有可能完全避免这类灾难的发生。
3 数据存储安全目标
3.1 保护数据的机密性
数据机密性是指信息不能被非授权者、实体或进程利用或泄露的特性, 可以通过禁止“向上读、向下写”的策略, 确保数据不会被泄露。
3.2 确保数据的完整性
数据完整性是指数据没有受到非授权方式所做的篡改, 同时也没有出现未经授权的使用情况, 如果充许“向上写、向下读”, 那么高安全等级的数据就有可能被低安全等级的用户、进程等主体篡改, 数据完整性将没有任何安全保障可言。
3.3 数据存储安全的方式
(1) 异地备份。异地备份是保护数据的最安全的方式。无论发生什么情况, 那怕是火灾、地震, 当其他保护数据的手段都不起作用时, 异地容灾的优势就体现出来了。困扰异地容灾的问题在于速度和成本, 这要求拥有足够带宽的网络连接和优秀的数据复制管理软件。 (2) RAID (独立磁盘冗余阵列) 。RAID (独立磁盘冗余阵列) 可以减少磁盘部件的损坏;RAID系统使用许多小容量磁盘驱动器来存储大量数据, 并且使可靠性和冗余度得到增强;所有的RAID系统共同的特点是“热交换”能力:用户可以取出一个存在缺陷的驱动器, 并插入一个新的予以更换。对大多数类型的RAID来说, 不必中断服务器或系统, 就可以自动重建某个出现故障的磁盘上的数据。 (3) 镜像。数据镜像就是保留两个或两个以上在线数据的拷贝。以两个镜像磁盘为例, 所有写操作在两个独立的磁盘上同时进行;当两个磁盘都正常工作时, 数据可以从任一磁盘读取;如果一个磁盘失效, 则数据还可以从另外的一个正常工作的磁盘读出。远程镜像根据采用的写协议不同可划分为两种方式:同步镜像和异步镜像。本地设备遇到不可恢复的硬件毁坏时, 仍可以启动异地与此相同环境和内容的镜像设备, 以保证服务不间断。 (4) 快照。快照可以是其所表示的数据的一个副本, 也可以是数据的一个复制品。快照可以迅速恢复遭破坏的数据, 减少宕机损失。快照的作用主要是能够进行在线数据备份与恢复。当存储设备发生应用故障或者文件损坏时可以进行快速的数据恢复, 将数据恢复某个可用的时间点的状态。瞬时备份:在不产生备份窗口的情况下, 可以帮助客户创建一致性的磁盘快照, 每个磁盘快照都可以认为是一次对数据的全备份。
快速恢复:用户可以依据存储管理员的定制, 定时自动创建快照, 通过磁盘差异回退, 快速回滚到指定的时间点上来。通过这种回滚在很短的时间内可以完成。
4 关键技术访问控制
(1) 关键技术访问控制。访问控制是指主体依据某些控制策略或权限对客体或其资源进行的不同授权访问, 限制对关键资源的访问, 防止非法用户进入系统及合法用户对资源的非法使用。 (2) 登录访问控制。登录访问控制为网络访问提供了第一层访问控制它主要控制哪些用户能够登录到网络存储系统并获取存储资源。 (3) 访问权限控制。将能够访问网络的合法用户划分为不同的用户组, 每个用户组被赋予一定的权限。用户对存储资源的访问权限可以用访问控制表来描述。 (4) 目录级安全控制。用户在目录一级指定的权限对所有文件和子目录有效, 系统还可进一步指定对目录下的子目录和文件的权限。 (5) 属性安全控制。当用户访问文件, 目录和网络设备时, 系统管理员应该给出文件目录的访问属性, 网络存储系统上的资源都应预先标出安全属性, 用户对存储资源的访问权限对应一张访问控制表, 用以表明用户对网络存储资源的访问能力。
5 小结
随着数据价值不断提升, 以及存储网络化不断发展, 存储系统正逐渐成为整个信息系统的中心, 数据成为最重要的资产。然而, 存储系统由本地直连向着网络化和分布式的方向发展, 使存储系统变得更易受到攻击, 数据遭受的安全威胁日益增多, 窃取、篡改或破坏重要数据的事件不断发生, 这就要求在特定存储系统结构下, 从存储系统的角度考虑存储安全性, 综合考虑存储机制和安全策略是网络存储安全的一个重要环节。
摘要:针对企业内部以及企业间数据存储安全存在的管理和数据设置问题, 文章系统的阐述了解决数据存储安全的方案, 防止其他系统未经授权访问数据, 或破坏数据给企业带来潜在的危害, 本文从数据存储出发阐述了保证数据存储安全的相关内容, 对企业发展有着重要的作用。
关键词:数据,存储,数据安全
参考文献
[1]王改性, 师鸣若.数据存储备份与灾难恢复.电子工业出版社, 2009-06出版.
[2]孙晓南, 余婕, 刘晓辉.网络存储与数据备份.清华大学出版社, 2010-11出版.
[3]康楠.数据中心系统工程及应用.人民邮电出版社, 2013-04出版.
数据流存储 篇9
随着通信业务的高速发展和膨胀,电信公司的业务支撑系统(Business Operation Sport System,Bo SS)存储的数据包括越来越多的计费详单、业务处理工单、各种各样的用户帐单、结算数据、以及统计分析数据等;在存储这些巨大的数据后,对这些数据的管理和共享也是一大难题。不难看出,系统本身正面临着信息管理和存储爆炸的挑战,而传统的存储管理方案只能支持单一的应用、服务器和操作系统。
存储区域网络(Storage Area Network,SAN)是一个不断发展的技术,能够为今天的1T管理带来快速的效益。存储区域网络能够提供存储和服务器的统一,以及不受干扰的备份,同时也消除了传统技术的距离限制。此外,与许多传统技术比较,SAN还能大大地改善应用的性能。正是在这样的背景下,作者通过对存储区域网技术和业务支撑系统的研究,综合分析了各种存储方式的优缺点和业务支撑系统的特性,提出了一个完备的数据存储管理解决方案,取得了不错的效果。
2. 网络存储系统结构分析
上世纪九十年代以来,随着网络技术的发展与处理能力的大幅提高,传统的单机数据处理方式被依附在网络上的以数据为中心的数据处理方式所取代,使存储系统与网络系统结合起来,产生了网络存储系统。基本的网络存储系统结构包括传统以服务器为中心的直接连接存储(Direct Access Storage,DAS)、附网存储(Network Attached Storage,NAS)和存储区域网(Storage Area Network,SAN)。
传统的直连存储DAS结构中,将具有块接口的存储设备(如磁盘、阵列)通过专用I/O通道,直接连接到文件服务器上,存储设备相当于服务器的一部分,由服务器提供存储管理与对外服务。在DAS结构存储系统中,数据的传输是以服务器为中心的,可以方便地集中管理数据,具有比较好的数据安全性。但是,客户访问存储系统中的数据时,数据需要在存储设备和服务器间多次转发,尽管文件服务器并不关心数据内容,通常也不对数据本身进行处理,但数据请求与传送都需要文件服务器的介入。当大规模用户进行数据访问时,给服务器的存取转发控制带来非常大的开销,使得文件服务器成为了整个系统中的性能瓶颈,对系统整体读写性能与可扩展性产生很大影响。
NAS是一种以数据为中心的存储结构,存储子系统不再通过专用I/O通道附属于某个服务器,而是通过专门系统的定制,将通用服务器上无关的功能去掉,只保留存储相关功能,可以看成是一台专门负责存储的“瘦”服务器,具有比DAS更高的读写性能。NAS提供文件级数据访问,支持NFS与CIFS网络文件协议,实现异构平台之间的数据级共享,在文件级别上建立安全机制也很容易。但是,NAS没有从根本上改变服务器/客户机的访问方式,因此当客户端数目或来自客户端的请求较多时,NAS服务器仍将成为系统的瓶颈。
SAN对前两种存储系统结构进行了比较大的改进,真正地将存储子系统从服务器上分离出来独立地连接在高速专用网上的,是一种以网络为中心的存储结构,目前典型两种结构是基于光纤通道的FC-SAN和基于IP网络的IP-SAN。客户通过高速专用网与存储设备连接在一起,通过虚拟化软件进行存储系统的集中管理,具有较好的扩展性。SAN中的服务器专门用来存放元数据,元数据描述了数据本身的属性,完成文件到存储设备物理块的映射。客户在访问存储系统时,通过从元数据服务器得到的元数据,直接访问存储设备,避免了传统服务器因转发带来的延迟,使得SAN具有较高的性能。
3. 电信业务支撑系统分析
当今社会,企业信息化,尤其是企业管理信息化的需求已经融入企业的发展战略之中,并成为核心竞争力的重要组成部分。目前电信业务支撑系统BOSS(Business Operations Support System)采取数据大集中的方式,在省级电信公司建立全省的数据存储和应用平台,而像OA、财务等管理系统大多采用的是DAS,并且相互独立。随着企业的发展和新业务的涌现,不仅管理系统中产生的数据越来越多,各种新的增值业务也会需要更多的空间来存储业务和管理数据,而DAS架构的扩展性差将成为数据存储的瓶颈。因此,要从电信业务数据中心的高度来规划存储,同时整合各个系统的“存储孤岛”。基于SAN的数据存储区域网络,建立一个集成的、分级的、便于数据共享的信息平台就是最好的选择。
4. 存储区域网络在电信业务支撑系统中的实现
为满足越来越多的信息系统对数据存储的要求,同时为了更好地构建电信企业数据仓库,通过数据挖掘技术来分析处理电信企业预测、决策问题,建立了如下的SAN数据存储架构。
其中第一层为数据存储层,采用双塔型的磁盘阵列来进行数据存储,其中磁盘阵列1存放在线数据以供前端业务处理系统、财务处理系统进行数据处理;磁盘阵列2存放业务处理系统、财务系统的历史数据或一些有价值的数据。两个磁盘阵列均通过RAID(Redundant Array of Independent Disks)技术来保证存储的更高性能指标、数据完整性和数据可用性。RAID的基本结构就是组合,捆绑两个或多个物理磁盘成组,形成一个单独的逻辑盘。对于RAID来说,在任何有害条件下绝对保持数据的完整性是最基本的要求,此外,数据可用性也是RAID系统的指标之一,数据可用性指的是阵列内部容错能力的水平,数据可用性程度越高,可被理解为当发生越多的部件失效时而数据访问仍不丢失。一个RAID阵列能提供的高可用性级别范围可从简单的磁盘冗余到所有部件的冗余性。
第二层为数据交换层,数据交换层是用两台光纤交换机把存储设备和主机设备连成一个统一规划的SAN。光纤技术成本低,距离长,可靠性高而成为事实上的存储传输标准。SAN在光纤通道扩展、第三方拷贝、远程拷贝、存储虚拟化方面等方面具有很高的性能和灵活性。数据交换层核心是SAN交换机,用于资源网络访问重新定向、实现多种访问协议桥接转换和数据不同格式的转换,并将下层存储方便地按需要分配给异构平台的不同的应用主机使用。从应用的角度来看,SAN是透明的,无需考虑数据最终会存储到哪个物理节点上。
第三层为业务处理及应用层,此层为企业服务器层,运行企业的关键业务,如业务支撑系统、财务系统、MIS系统、DSS系统等。备份服务器可专用来实现各个系统及数据的自动备份与恢复,按照各自设定的策略,定时周期备份把磁盘阵列的数据或服务器上的数据备份至磁带库中。其中磁带库或是光盘库作为在线数据的备份设备,也是离线级的数据存储,一旦在线数据发生损坏,可用磁带库的备份数据进行快速恢复。
第四层为客户端,此层是前端的PC和笔记本电脑,安装企业应用的客户端软件或是利用Web方式,登录到应用系统或是应用服务器中,功能一是业务人员实现对应用系统的基本操作;二是技术人员对应用系统和服务器的运行状态进行监控和维护等工作。
5. 结论
文章通过对存储区域网技术和电信公司业务支撑系统研究,设计并实现了一种电信公司业务支撑系统的数据存储和管理方案。
SAN在BOSS中成功的应用,改变了BOSS的数据存储方式,它是一种人们期望很久却因为技术限制一直无法实现的数据管理和共享方式。通过SAN的管理机制和备份方案,大大提高了数据的可用性、安全性和易管理性。这个方案支持公司业务支撑系统存储未来几年内的需求,提供了网络时代理想的存储与管理方案。
随着通信业务的发展,存储区域网在通信行业内各种系统中的应用推广是很有益处的。在此课题的基础上,可以根据研究成果的实际应用效果,对存储区域网技术进一步研究,探索出更加完善的解决方案和实施方法。
参考文献
[1]张春.电信企业信息化建设的几点考虑[J].电信工程技术与标准化,2005,(1).
[2]何永康.如何搭建运营商级SAN[J].现代通信,2005,(2).
[3]刘书香.建立基于SAN技术的存储网络[J].北京工业职业技术学院学报,2005,(4).
数据安全与数据备份存储技术分析 篇10
关键词:数据安全,数据备份,存储技术
一、数据安全
1.1逻辑上的安全。数据的不安全性主要原因包括病毒入侵, 黑客攻击, 人为篡改等等, 其中硬件和软件的故障是造成数据不安全性的主要原因。逻辑上的安全, 一般是指防止不法分子入侵或病毒破坏的措施。就比如说, 现在很多企业都是通过互联网来进行业务往来或通过互联网与其分支机构进行联系与管理, 一旦数据丢失, 造成的损失是巨大的。所以这些企业都很重视存储在服务器里的数据, 比如说, 公司内部文件, 公司账户, 或客户资料。而硬盘在数据存储中发挥着重大的作用, 正因为如此才成为黑客攻击的对象, 硬盘的价值是有价的, 但是存储在硬盘内的数据是无价的。
1.2物理上的安全。这就是对于电脑本身而言, 电脑受到人为因素的破坏或者不可抗力的灾害时, 若之前没有对电脑内部存储的数据进行数据备份, 那这些数据也会随着电脑的损坏而消失。
其实不管是逻辑上的安全还是物理上的安全受到威胁, 数据备份都是一个直接有效的措施, 这也就是俗话说的有备无患。
二、数据备份
数据备份是防止数据安全性受到挑战的有效措施, 一旦原有数据受到侵犯, 在对不法分子进行法律追踪的同时, 也能启动备用数据, 使服务器快速再次投入使用, 将受到的损害减少到最小的限度, 减少损失。
三、数据备份技术分类
数据备份从不同的角度可以分为不同的类型, 以备份模式的角度来看, 可以分为逻辑备份和物理备份。
3.1逻辑备份。逻辑备份也可以称为基于数据的备份, 前面我们提到过, 硬盘是有价的, 而硬盘内的数据是无价的, 逻辑备份就是针对数据进行备份。
每一个文件都是由不同的数据组成的额逻辑块组成的, 而每一个逻辑块都存储在有顺序的物理磁盘块上。备份软件不仅可以对磁盘块进行操作, 也可以对文件进行操作, 智能识别文件结构, 将所有的文件和数据拷贝到备份资源系统中去, 这样就可以按照文件的排列顺序读取文件, 并且录入备份媒介上, 这样极大地促使了单独文件的恢复速度。但是, 长期连续存储数据, 会让备份文件的速度减慢, 因此在进行无顺序文件的查找时需要消耗更多的时间。逻辑备份的缺点就在于, 因为其备份的原则是按照顺序连续备份, 如果只是其中一小部分的文件出现问题, 也要对整个文件进行备份。
3.2物理备份。物理备份也被称为“基于设备的备份”, 故名思义就是在电脑操作方面对文件进行备份。电脑系统在将数据拷贝到备份媒介上时, 会自动忽略文件的结构, 因为备份文件要求在实施过程中花费较少的时间和开销, 因此就需要以这种方式提高文件的性能。不过, 这种方法也有它的缺点, 因为物理备份与逻辑备份不同, 它并不是将文件连续的存储在备份媒介上, 这样的话文件恢复起来就会比较缓慢。在这种情况下, 要对数据进行备份的话, 就需要了解文件在磁块上的组织信息。物理备份的另外一个缺点就是可能会导致数据引入的不一致, 一般电脑在进行数据备份时, 会对要备份录入磁盘块的数据进行缓存, 而物理备份跨越磁盘块的特点会忽略缓存文件的数据, 造成数据的丢失。
即使两种备份方法或多或少地存在一些缺点, 但也不能否认其在数据备份中的重要性以及实用性, 对数据安全的保护作用。
四、结束语
数据备份的技术多种多样, 以上着重讨论了逻辑备份和物理备份技术, 人们在进行数据备份时, 也可以根据需要备份数据的不同, 选择合适的备份方式。但是, 不管如何, 数据安全与数据备份的目的都是为了保护重要信息不泄露, 保证数据的完整以及防止数据丢失。
参考文献
[1]章壮洪, 刘谦.组织的数据安全与容灾备份[J].会计之友 (中旬刊) , 2009 (02) .
数据存储 进化正当时 篇11
在一项对2013年IT支出意向的调查中显示,备份与数据保护是未来几年内企业IT部门最重要的IT优先任务之一。数据价值与生命周期的转变,使得数据对企业而言,从以前的风险转变为现在的机会,由此,对于数据,企业的需求也从基于减轻风险的单程生命周期管理升级为基于机会的不可预知的工作流程的管控。
Gartner高级分析师Dave Russell表示:“未能优化数据保留和数据副本数量的IT部门不断遭受与日俱增的存储成本并提高其治理风险。当然,归档能够降低IT部门必须处理和管理的存储数量。”
以出版物、广播电视、多媒体制作为代表的媒体行业为例,这些企业每时每刻都要对大量信息进行创作、搜集和整理,因此对存储需求的大幅增长已经是不争的事实。其中,尤以广电多媒体行业所面临的存储挑战最为严峻。究其原因主要是广播电视行业的数据存储大多以音频视频流为主,往往一个文件即高达数十GB;数据传输的实时性要求高,数据必须在限定的时间以限定的形式和流量提供;存储量的增长极其迅速。
此外,还有最为重要的一点是用户的需求发生了变化。此前,用户只是需要将数据备份到磁盘或者磁带上,关心的问题是如何降低风险、用最小的代价让数据得到保护,而现在用户不仅仅是要保存这些数据,还要从这些数据当中挖掘新的商机,这就使得企业的存储系统不仅是在灾难到来的时候实现数据恢复,还让在日常工作中实现备份数据的高效读取、分析。
“有了新的数据流程需求,用户就会考虑现有的硬件环境是否还能满足,这也就促使客户考虑如何升级硬件适应这种新的对数据备份的利用和需求。我们已经看到了IT基础构架硬件方面的一些变化,热数据放在闪存上面,而把长期保存的数据放在对象存储或者类似于云的存储上。”昆腾公司全球市场营销副总裁Bryce Hein表示,“面对非机构化数据,由于其保存量非常大,传统的存储方式是比较困难的。对于处理视频、音频等数据而言,我们现在常见的像重复数据删除技术对它来讲其实也没有太大的用途。”
针对上述需求,就在2013年9月,昆腾与CommVault宣布将一同扩展其对象存储产品,以便为数据中心融合备份与归档提供更好的解决方案。这个经过验证的解决方案基于昆腾 Lattus对象存储技术以及CommVault Simpana 10软件,能够实现全面数据保护和归档战略,从而降低了主存储成本并优化了备份性能,同时在多PT级环境中最大程度降低了管理复杂性、管理成本和资本支出。
Bryce Hein指出,推出对象存储产品是完全迎合用户实际需求的,驱动这项技术快速投向市场的原因主要有三个方面。首先,客户有的时候需要远程协作,需要把数据传到很远的地方,而对象存储产品本身就包含跨地点数据复制的功能;其次,数据达到一定的量级以后,尤其是现在4TB硬盘的推广,硬盘一旦损坏,传统的RAID技术受到自身局限性,会出现很多问题,对于大数据存储,由于RAID存构的时间非常长,对于客户来讲性能会变得很差甚至发生停机事件,这对很多企业来说影响非常大;第三,就是磁盘本身磁记录的错误,如1变成0、0变成1,这种错误也是传统RAID技术所难以避免的失误,在流量非常大的时候这个问题一定会出现。
而对象存储产品则可以很好地解决上述三个方面的问题。举例来讲,在一个高度可扩展、高成本效益,并且不需要“叉车式”升级的一种永久性磁盘归档的磁盘解决方案中,Lattus可近线访问全球各地的归档数据。Lattus 提供比传统 RAID 产品更好的耐用性,其中包括真正的自我修复和自我保护功能,并且无需复制就能自动进行多站点保护。最终实现一个无需备份的高弹性、容灾、可扩展的归档库。CommVault Simpana 将备份、归档、报告和灾难恢复(DR)统一到一个软件平台上,提供一个融合数据管理解决方案来控制成本和风险。
数据流存储 篇12
1、个人存储空间不足。供电企业个人PC设备, 使用年限一般为5-7年, 部分机型较老较旧, 配置较低。主要的存储设备为硬盘, 空间在多年的存储使用下已出现严重不足, 普遍无法适应新增数据存储的需求。
2、数据交互共享难。当前, 个人用户之间, 部门之间, 需要及时共享的数据容量越来越大, 通过传统的使用U盘、移动硬盘、FTP来中转拷贝数据的方式, 已越来越不适应当前的需要, 存在着病毒感染、丢失等安全隐患。
针对以上两种情况, 本文通过架设私有云存储服务器的方式来解决数据存储和共享方面的问题, 为供电企业数据存储提供新的思路和解决方案。
一、项目实现功能
从应用场景上, 我们的方案包括如下主要内容:1、文件存储 (为每个用户提供10G以上的存储空间) ;2、数据同步 (通过云存储提供的数据同步功能, 实现员工数据的多终端同步) ;3、桌面数据备份 (通过云存储提供的数据备份功能, 实现电脑中的数据的自动备份, 支持文件级差异化备份机制) ;4、文档内容发布 (通过云存储提供的数据自动分发功能, 可将企业内部公告、通讯录等文档或电子表格快速地分发给指定的员工或部门, 或通过外链地址 (U RL) 嵌入到邮件等) ;5、文档快速汇总 (通过云存储提供的数据自动汇总功能, 可以实现快速将员工本地文件自动汇总到云存储的指定位置中) ;6、群组或部门工作区 (可按需要建立群组或部门工作区, 用于团队协作, 协同办公, 并支持文件多版本及文件锁机制, 提升多人协同办公的效率) 。
二、项目实施方案
2.1系统架构设计图
如图1。
2.2主要功能模块
1、负载均衡模块 (LVS) :
负载均衡模块建立在所有应用结构之上, 它提供了一种有效透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。
2、应用服务模块 (APP Server) :
提供了一套完整的企业数据应用、管理、监控的应用系统。私有云存储作为企业数据应用系统, 为企业员工提供个人数据存储、分享服务, 保护数据安全;也可以按照企业组织架构组建企业级、部门级、项目级的协同工作服务, 提高数据处理效率。此外, 灵活的空间管理、集中的账户配置、实时的日志审计方便系统管理者实现全方位的管理和监控。其中包括功能模块如下。
应用服务 (Web Service) :为整套系统前端应用和web端访问提供支持。
传输服务 (TP Service) :为用户提供数据传输的支持。
3、文件存储模块 (Storage Server) :
是一套分布式文件存储系统, 为应用服务模块提供底层数据存储及管理服务。可以作为标准的存储系统为企业应用系统提供标准的数据存储。
4、数据库模块 (DB Server)
其中包括功能模块如下。
主数据库:为应用服务模块提供结构化数据服务。
从数据库:为主数据库提供备份服务。
2.3部署方式
在内网服务器上安装私有云存储软件, 并配置存储服务器与之互联。保持私有云存储系统的网络连通, 在IE中输入默认的管理地址进行管理访问。
对私有云存储的部门及员工进行初始化, 并为其分配私有存储空间, 以及划分上传、只读和下载等权限归属等。对服务端配置完毕后, 在每一台个人PC设备上需要安装客户端软件, 通过建立的用户名和密码登陆后, 即可在客户端上进行文件存储操作, 并可以通过外链的形式共享给他人。
三、结论