企业分布式存储解决方案



上一个:

下一个:

数据归档管理系统解决方案

随着云计算在全球范围内的高速发展,谷歌、亚马逊等企业的崛起,特别是"互联网+"深入融合背景下的业务云化需求,传统企业在数据中心建设中被动地徘徊在传统存储阵列与分布式存储两种体系存储架构之间。这两种存储结构并没有绝对的优劣之分,而大数据的繁盛让分布式存储架构近几年中获得了前所未有的关注。


传统SAN以高度的可靠性、稳定性和功能丰富性,在应用实践中获得了广泛认可。随着数据量不断增加,企业对于数据存储可扩展性提出要求,分布式存储系统逐步成为扩展性强、价格低廉的选择。


分布式存储系统,是将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据,存储服务器成为系统性能的瓶颈,也是可靠性和安全性的焦点,不能满足大规模存储应用的需要。分布式网络存储系统采用可扩展的系统结构,利用多台存储服务器分担存储负荷,利用位置服务器定位存储信息,它不但提高了系统的可靠性、可用性和存取效率,还易于扩展。选择什么样的存储解决方案直接决定了整个系统的系统架构以及系统的性能和稳定程度。


对于城市监控系统的监控数据,各个区域是否集中,怎么集中很多时候和一个城市的行政划分有关,一个城市的区域大小和可用的网络状况有关。城市越小,网络条件越好,越容易实现集中存储。反之就越需要进行分布式存储。如北京有8个区。建立视频监控系统时,可以每个区域先集中,再汇聚到总中心,如应急指挥中心。


  视频监控存储采购需要注意的问题因为监控是一个视频应用类系统,具有和其它系统不同的访问特点:以流媒体方式对存储设备进行访问,多路视频长时间同时写入同一个存储,实时多路视频访问同一个文件,视频访问带宽恒定,带宽稳定性要求高,为1/25秒的平均值,视频访问时间长,容量需求巨大,存储扩展性能高。视频存储对存储环境没有特殊的要求。按常规监控系统的数据基本上都是临时性,超过在线存储时间(如7天、15天,个别会要求30天)后,就可以删除了,因此监控系统的备份很多时候只要能满足一个月就可以了。


  因此的设备选型时,不一定非要选带宽最大的,而要选择带宽波动最小的,曲线最平稳的。因为要长时间运行,最好在用控制器架构的存储设备,不要选择PC架构的,选择容量可以扩张的设备。另外,在超过100TB容量的情况下,FC-sata设备的价格不一定就比ISCSI设备贵。FC支持的磁盘数量多,ISCSI设备一般支持的数量少,假设容量要求为500TB,FC-sata只需要一套就可以,而ISCSI设备就需要很多到才行,仅仅ISCSI设备的控制器部门的费用就是很大一块。


  视频监控系统首先是一个视频应用系统,因为存储设备要能够提供稳定的带宽输出,满足长时间视频读写的要求,其次,视频监控系统既要满足大量摄像头的实时数据写入,和要满足大量监控端的视频回放需求,因此,还要考虑存储系统可以提供足够的IOPS性能。


  由于视频监控系统一般遍布全市甚至全国,因此存储设备还要考虑是否可以实现物理上分散,但管理和监控上可以统一的功能。


  网络视频系统的存储方案选择视频应用类系统包括如网络视频、IPTV、VOD点播和视频监控。但由于网络视频系统的码率一般相对较小,大约为100Kb/S-200Kb/s左右,因此对带宽要求相对较小。因此一般来将存储设备的IOPS性能要求很高,一般网站机房的总带宽一般都在1-2Gb/s(实际可用的带宽)左右,个别大型网站可能达到4-5Gb/s.能分配给网络视频板块的也就差不多100-200MB/S,因此对于带宽来讲一般的ISCSI存储和FC存储都可以轻松满足,但如果采用NAS存储,则需要中高端产品。


  虽然采用高端NAS设备的成本较高,但NAS本身对外提供共享的文件系统,在网络视频的管理和共享方面区有天然的优势,方便后期的视频服务器数量扩张和升级。ISCSI和中低端的FC设备由于采用低成本的SATA磁盘,IOPS新能一般都在6w-10w左右,因此无法用与大型的网络视频系统。


建议网络视频系统选型是要从带宽和IOPS两个方面去考虑,在两个方面都满足的情况,尽量采用NAS产品。大型系统建议采用FC磁盘的光纤设备。

集中存储的优缺点是:物理介质集中布放;数据上传到中心对机房环境要求高,要求机房空间大,承重、空调等都是需要考虑的问题。


分布存储的优缺点是:物理介质分布到不同的地理位置;数据就近上传,对骨干网带宽没有什么要求;可采用多套低端的小容量的存储设备分布部署,设备价格和维护成本较低;小容量设备分布部署,对机房环境要求低。