《视频监控数据存储技术方案.docx》由会员分享,可在线阅读,更多相关《视频监控数据存储技术方案.docx(9页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、视频监控数据存储技术方案第一章方案概述1第二章用户需求2第三章存储空间计算2第四章 传输带宽计算错误!未定义书签。第五章方案设计原则错误!未定义书签。5. 1紧密结合用户的实际需求错误!未定义书签。6. 2保持技术上的先进性错误!未定义书签。7. 3开放式模块化系统错误!未定义书签。8. 4采用标准化的技术和产品49. 5系统的易管理性和稳定性4第六章 NAS、FC SAN、IP SAN 比较 410. 1 NAS存储架构411. 2 FC SAN512. 3 IP SAN5第七章 方案设计错误!未定义书签。13. 1 UIT BS2000 IP SAN存储方案错误!未定义书签。14. 2 U
2、IT BS3000e IP SAN 存储方案 715. 3 UIT BM3800B FC SAN 存储方案 816. 4方案价格比较错误!未定义书签。第一章方案概述监控行业概述监控技术从上个世纪80年代进入我国以来,随着安防需求的急剧增加一直在飞速发展,从技术层面上来 看,已经经历了多个不同的发展阶段。随着计算机技术的发展和网络的普及,目前,视频监控已经发展到了 网络多媒体监控系统。新一代视频监控管理系统与前几代视频监控系统的根本区别在于,其不再局限于简单地完成对视频信号 的处理、传输、控制,其核心乃是对基于工P网络的多媒体信息(视频/音频/数据)提供一个综合、完备的 管理控制平台。网络多媒体
3、监控系统以网络为依托,以数字视频的压缩、传输、存储和播放为核心,以智能 实用的图像分析为特色,并与报警系统、门禁系统整合到一个使用平台上,引发了视频监控行业的一次技术 革命,迅速受到了安防行业和用户的关注。网络多媒体监控管理系统,可以广泛用于多媒体视讯调度指挥、 网络视频监控和会议、多媒体网上直播、网络教学、远程医疗等各个方面。网络多媒体监控系统由网络多媒体监控管理平台和前端信息采集设备组成,其核心是网络多媒体监控管 理平台。网络多媒体监控管理平台集计算机网络、通信、视频处理、流媒体、和自动化技术于一身,是视频、 音频、数据和图示一体化的解决方案,兼备网络视频监控、视频会议、视频直播等功能,具
4、有超大规模组网 能力,是构建于LAN/工nternet网络之上、支持多种传输方式的综合多媒体业务管理平台,其应用已远远超 出监控本身所涵盖的内容。网络多媒体视频服务器(Network Media Video Sever, NMVS)负责前端的视频处理部分,它同时 具备了网络视频服务器的网络传输功能和硬盘录像机的存储功能(Video Sever + DVR) , NMVS是一种 对视频、音频、数据进行压缩、存储及处理的专用计算机设备,它在视频监控、网络教学、工P视频会议、视 频直播及视频点播等方面都有广泛的应用。NMVS采用最先进的MPEG4或H.264等压缩格式,在符合技术指 标的情况下对视频
5、数据进行压缩编码,以满足存储和传输的要求。视频监控存储需求特点1)对存储的容量需求弹性比较大,存储容量的多少随着画面质量的提高、画面尺寸的增大、视频线路的增加 都会成倍的增加容量需求。2 .)对存储的性能要求不高,但是需要能够满足长时间的连续数据读写,数据流量大但访问请求数量低。3 .)数据保存周期短,一般的监控场所数据保存一定时间(如1个月)以后便可以删除。近年来存储技术高速发展,存储设备价格不断下降,专业存储系统具备了在视频监控行业广泛应用的基 础。第二章用户需求监控系统用户为小区派出所,需要对辖区内的重要区域采取视频监控的措施,保障辖区内的安全。具体情况 如下:I)共有10个派出所,分别
6、对各自辖区进行监控,并分别存储视频监控数据。2)每个派出所共控制300个左右摄像头,10个派出所一共3000个摄像头。3)摄像头的视频监控格式采用C工F格式。4)所有摄像头全天候24小时监控本辖区。5)视频监控数据要求保存1个月。第三章存储空间计算用户采用的CIF视频存储格式每路摄像头的码率约为500kb/s, 1路摄像头每天的数据量约为5GB, 24小时监控,视频数据存储1个月,则每个派出所所需要的存储空间为:500kb/8*3600*24*30*30045.3TB考虑一定的冗余空间,我们建议每个派出所配置46-48TB的磁盘空间。第四章传输带宽计算C1F视频格式每路摄像头的码率为500kb
7、/s,即每路摄像头所需的数据传输带宽为500kb/s,每个派出所 全部300路摄像头所需的数据传输带宽为:500kb/8*30019MB/s大部分磁盘阵列都能满足这样的带宽要求。另外,目前市面上主流的视频服务器都能支持100-200路左右的摄像头,而根据用户每个派出所控制 300个左右摄像头的实际需求,可以推算出每个派出所最多只需3-4台视频服务器。第五章方案设计原则1紧密结合用户的实际需求存储区域网建设是视频监控数据存储系统的基础,它直接地影响到视频监控数据的安全性,可用性,因此只 有紧密结合实际需求才能设计出一套切实可行而又行之有效技术的方案,我们对监控行业的需求做了认真的 分析研究,并且
8、将用户地具体需求一步一步地细化,然后结合其他地区存储区域网以往网络集成的经验,从 而制定了本方案。5. 2保持技术上的先进性存储区域网络建成后的不仅要能够满足目前的应用需求,而且还要能够为将来的存储区域网发展打卜 .良好的 基础,这就要求在技术方案必须保持具备相当的先进性,从而保障网络建成后在相当一段时间之内不会落伍, 不会被淘汰,因此本方案中采用先进的体系结构、软硬件技术设备,使系统在未来保持尽可能长的生命周期, 即达到提高信息化水平、实现先进管理思想的目标,又保护对新系统的投资。6. 3开放式模块化系统模块化的系统结构方便用户的升级管理开放式的系统有利于和其他系统的互联实现资源的有效共享。
9、具体 针对用户存储系统的特殊性和数据的重要性,以及长时间的数据存储和随时地查询调用等读写数据的要求, 整个监控视频数据存储系统必须具备以下特点:1)高可用性能应对大量数据传输、交换,长时间的不间断的数据读写,重要数据的存储和妥善保存,确保数据的安 全性。2)高性能(负载均衡和并行处理)对网络数据读写的实时性和网络调用数据提高响应的速率。3)高灵活性必须满足用户系统增减容量的需求,及根据服务器应用的灵活配置,保证存储系统的扩展性。4)高性价比必须考虑一次性软硬件成本的投入,及最终用户在系统维护方面技术和资源的投入,同时必须充分考虑 到投资的时效性。5. 4采用标准化的技术和产品在方案设计中,所有
10、硬件、软件和网络产品必须坚持标准化原则,遵从国际化组织所制定的各种国际标准及 各种工业标准,从而使系统实现具有如下特点:1)可移植性系统中所开发的各种应用软件具有良好的可移植性。2)可扩展性主机、存储设备、网络、应用系统均要有良好的扩展能力。3)互联性构建网络灵活,支持各种网络结构以及多种通信媒体,实现跨平台、跨应用的各种设备和网络的互联。4)兼容性随着时间的推移,监控系统还有可能面临升级或增加设备,这就使得在不同时期建立起来的网络信息系 统大多都采用的是不同品牌不同技术性能的产品,因此,存储产品的兼容性显得更加的重要,必须要与市面 上的主流产品相兼容。6. 5系统的易管理性和稳定性任何一个网
11、络的建设都需要考虑到应当方便用户的管理,另外所建成的网络系统需要是一个稳定性好、可靠 性高的系统,监控系统的稳定性更是重中之重,一旦系统或是重要数据产生任何的严重错误,将造成不可估 量的损失和后果。第四章 NAS、FC SAN、IP SAN比较根据用户的多服务器连接存储设备的需求,目前,市面上满足这一需求的主流存储架构有NAS、SAN两 种,而SAN又可分为FC SAN和工P SAN两种。下面就针对监控行也对存储的需求特点,结合用户的实际应 用,将这三种存储架构进行一个比较。7. 1 NAS存储架构1)文件级数据存储NAS设备最主要的应用就是企业或部门内部的文件共享。由于NAS本身就是一台瘦服
12、务器,有自己的操作 系统和文件系统,可以直接与本地局域网连接,提供文件级的数据共享,但NAS设备无法成为服务器的本地 硬盘,无法提供数据块的存储。2)带宽有限NAS是在局域网中传输,且有自己的操作系统和文件系统,这些因素都会导致NAS设备的带宽降低,增 加NAS设备的读写响应时间。6. 2 FC SAN1)高性能FC SAN最大的优势在于其出色的性能。目前的主流FC产品的带宽为2Gb/s, 4Gb/s产品也已经相当 普遍,这是FC SAN高性能的标志。而光纤磁盘本身的高性能,也为FC磁盘阵列提供了高速运转的基础。2)扩展性强FC SAN的扩展能力很强,1个光纤通道最大可支持127个设备(即磁盘
13、),而一台光纤阵列至少会有 2个以上的光纤通道,有的甚至更多,这就意味着用户购买一台光纤阵列产品就可以通过连接JBOD来安装 更多的磁盘。另外,FC SAN还可以方便的通过光纤交换机来扩展磁盘阵列。3)成本较高FC SAN的高性能带来的另外一个特点就是高成本,从光纤阵列本身到光纤磁盘再到光纤交换设备、光 纤HBA卡等周边设备的成本都是最高的,而采用光纤磁盘阵列带来的管理维护成本,也将是用户一笔不小的 开支。4)传输距离有限光纤的传输距离最大为10公里,如果需要更长的数据传输距离,只能增加光纤中转设备,而一般用户是 无法承受如此高昂的费用的。6. 3 IP SANIP SAN 中所采用 iSCS
14、I 通信协议是 internet Small Computer System Interface 的缩写,实际 上是一个互联协议,是SAN结构的一种。通过将SCSI协议封装在IP包中,使得SCSI协议能够在LAN/WAN 中进行传输。IP SAN的特点、优势IP SAN的特点1)为存储区域网定义(SANs) a IP SAN是SAN的一种,通过工P实现的SAN,即工PSAN.2)支持数据库应用所需的基于块的存储。虽然是通过工P传输,但.iSCSI却是基于块的存储,这有别 于NAS的基于文件的存储。3)基于TCP/IP, iSCS工是被封装在工P包中进行传输的,所以它具有TCP/工P的所有优点,
15、诸如可 靠传输,可路由等。4)建立和管理基于工P的存储设备,主机和客户端之间的连接是建立在广泛使用的,为大家所熟悉的 开放标准上的5)提供高级的工P路由,管理和安全工具。现有的绝大部分网络管理工具都可以用来管理工PSAN.IP SAN的优势与FC SAN一样,IP SAN也属于SAN大家庭中的一员,它的优点正是FC SAN目前存在的普遍缺点。1)低成本由于通过以太网进行传输,企业可以利用现有的以太网设施来部署iSCSI存储网络,而不需要更改企 业的网络体系,所以他的部署成本比较低。由于对以太网的熟悉程度都比较高,所以培训和维护管理的费用 也大大降低。2)协议本身没有距离限制由于使用TCP/工P
16、进行传输,他不但可以在局域网中进行部署,也可以跨过路由设备在广域网中进行部 署,大大扩展了 iSCS工存储网络的部署范围。灵活的拓扑结构:iSCS工不但可以在局域网内部署,还可以在广域网内部署,拓扑结构非常灵活。3)易于使用即使是多个厂家的设备:iSCS工结构简单,容易理解,协议通用,不同厂家的产品可以有机的结合起来 共同使用,极大地保护了企业的投资。4)易于扩展由于iSCS工存储系统可以直接在现有的网络系统中进行组建,并不需要改变网络体系,加上运用交换 机来连接存储设备,对于需要增加存储空间的企业用户来说,只需要增加存储设备就可完全满足,因此,iSCSI 存储系统的可扩展性高。综上所述,针对
17、视频监控用户的需求和数据存储应用特点,工PSAN架构无疑是最合适的,其较FCSAN 的成本优势,较NAS的性能优势和数据块级的存储都为工PSAN成为最适合视频监控系统应用的先天性优势。第五章方案设计7. 1 UIT BS2000 IP SAN 存储方案7. 1. 1方案说明1)每个派出所的300路摄像头连接在视频服务器或其他视频采集设备上,视频服务器再与存储设备通过千 兆以太网双绞线相连。2)每个派出所采用7台U工T BS2000磁盘阵列,满配共安装112块500GB的SATA-工工硬盘。3)每台BS2000磁盘阵列的15块硬盘创建为RA工D5,剩余一块硬盘作为热备盘,以确保存储数据的 安全性
18、,保证数据在常规情况下不会丢失。4)每台BS2000磁盘阵列为16个磁盘位,满配后,每台阵列的容量为(16-2) *500=7TB (注:减 去的2块硬盘是创建RA工D5和热备盘所需的2块),7台磁盘阵列的总容量为49TB。考虑磁盘的实际容量 与理论容量不符,且还需为整个监控系统预留一定的冗余度,则49TB的容量空间完全可以满足用户需求的。7. 1. 2方案拓扑图图表1一个派出所视频存储示意图(下同)7. 1. 3方案配置清单注:以下配置清单为一个派出所所需设备(下同)7. 1. 4方案特点1)管理性BS2000磁盘阵列可以通过阵列前面的液晶面板和超级终端对阵列进行配置、管理、维护和监控,可在
19、液晶 面板中查看阵列当前的状态和运行情况,及配置信息,并且在阵列出现故障、读写错误或其他异常时,液晶 面板上会显示错误信息,并有蜂鸣报警,以及时通知管理员。毫无疑问,BS2000的前液晶面板的设计为系 统管理员带来了极大的方便,并能够让管理员迅速地掌握阵列的操作。上述所有的操作都只能对单台阵列进行管理,多台阵列一起使用时,只能对每台阵列分别进行维护管理。2)稳定性由于每台BS2000磁盘阵列的16个盘位都有各自的控制器,大大增加了单台磁盘阵列的稳定性。BS2000 所有的部件都是全冗余设计,避免了单点故障。这些部件在出厂前都进行了严格的稳定性测试,保证磁盘阵 列在出现一般性故障时不会造成数据读
20、写中断,或数据丢失等严重后果。另外,BS2000还提供了一系列的 报警和安全机制,如声音报警、E-mail报警等,所以,BS2000可以完全满足视频监控系统对存储设备稳定 性的要求。3)扩展性由于监控数据的增长很快,且带有一定的不确定性,所以对于视频监控系统来说,扩展性也是比较重要的方 面。BS2000磁盘阵列不能连接扩展柜,需要通过增加磁盘阵列来达到扩容的目的。相对来说,BS2000更适 合于小容量的数据存储。7. 2 UIT BS3000e IP SAN 存储方案7. 2. 1方案说明1)每个派出所的300路摄像头连接在视频服务器或其他视频采集设备上,视频服务器再与存储设备通过千 兆以太网
21、双绞线相连。2)每个派出所采用3套UIT BS3000e磁盘阵列,每台磁盘阵列再连接2个扩展柜,全部安装500GB 的SATA-H硬盘。3)每台BS3000e磁盘阵列的主柜和扩展柜均各自分别创建RATD5,且在每个磁盘阵列和扩展柜上都 采用一块硬盘作为热备盘,以确保存储数据的安全性,保证数据在常规情况下不会丢失。4)每台BS3000e磁盘阵列为15个磁盘位,扩展柜为12个磁盘位,满配后,整个存储系统的容量为 (15+12+12-6) *50016. 5TB (注:减去的6块硬盘是创建RAID5和热备盘所需的2块,1台磁盘阵列加2个 扩展柜则为6块),3套存储系统的总容量为49. 5TB。同样,
22、49. 5TB的容量空间完全可以满足用户需求的。7. 2.2方案拓扑图7. 2. 3方案配置清单序号7. 2. 3方案配置清单1)管理性 BS3000e是采用WEB方式进行管理的,只需对BS3000e设置一个IP地址,就可以通 过浏览器访问其控制器的管理界面,这也就意味着在远程就可以完成对BS3000e进行配置、管理、维护、查 看状态等所有的操作,这也是与BS2000的管理方式的不同之处。另外,所有的JBOD都由主阵列来统一管理, 减少了维护点。在阵列出现故障、错误时,BS3000e也同样会通过蜂鸣报警、E-mail等各种方式通知管理员。2)稳定性 BS3000e是UIT公司的高端iSCSI产
23、品,其性能和稳定性都非常好。且与其他的iSCSI产 品不同,BS3000e的双控制器设计,也增加了系统的稳定性,阵列其他所有部件也都是全冗余设计,而川0D 扩展柜也有自己独立的冗余电源、散热部件。另外,值得一提的是BS3000e主阵列与JBOD扩展柜之间是通过 SAS电缆传输数据的,其高达12Gb的带宽,保证了主阵列与JBOD之间的数据高速读写,用户根本不用为阵 列与扩展柜之间数据传输的带宽及延时问题担忧。3)扩展性 每台BS3000磁盘阵列最多可以连接3个扩展柜,支持51块磁盘,需要更多磁盘时,则 要增加磁盘阵列的主柜。BS3000e的扩展能力较BS2000相对更好一些,更适合数据量中等的数
24、据存储应用。7. 3 UIT BM3800B FC SAN 存储方案7. 3. 1方案说明 1)BM3800B有8个2Gb光纤接口,可自定义为主机或磁盘通道,最大可支持直连7台服务器,所以,在本方案中,采用UIT BM3800B光纤磁盘阵列不需要光纤交换机,视频服务器直接 与存储设备相连2) BM3800B采用的是控制器独立设计,通过连接磁盘柜来增加容量。由于BM3800B的8个光纤通 道可自定义为主机或磁盘通道,而每个光纤通道最大可连接127个设备(即磁盘),所以,BM3800B最大可 支持840块磁盘。本方案中,BM3800B需要连接112块硬盘。3) 每个派出所采用1台UITBM3800
25、B磁盘阵列,连接7台16个SATA盘位的JBOD磁盘柜,共安装112 块 500GB 的 SATA-II 硬盘。4) 每台BM3800B磁盘阵列的JBOD都创建为RAID5,同样在每台JBOD上都采用一块硬盘作为热备 盘,以确保存储数据的安全性,保证数据在常规情况下不会丢失。5) 整个存储系统的容量为(16-2) *500=7TB, 7台JBOD的总容量为49TB,同样为用户保留了一定的冗余空间。7. 3. 2方案拓扑图图表37. 3. 3方案配置清单7. 3. 4方案特点1)管理性BM3800B是UIT公司光纤产品中面向中高端用户的一款光纤产品,在本方案中,每个派出所只需一台BM3800B磁
26、盘阵列,这对用户的管理维护带来了方便,所有的磁盘柜都连接在BM3800B控制器的磁盘通道接 口上,由控制器统一管理。与BS3000e相同,BM3800B也是采用的WEB管理方式,通过浏览器对控制器进行 配置、管理、维护操作的,这同样也为需求在远程或网络为管理、监控阵列的用户提供了简单的操作方法。2)稳定性BM3800B是UIT公司针对海量数据存储需求用户而专门设计的。与上述两款阵列不同,BM3800B将磁 盘阵列的控制器模块独立出来,独立的电源及散热部件,合理的内部结构和更加高性能的CPU及内存,都保 证BM3800B的稳定性是三款产品中最好的。而旦,BM3800B还可以将双控制器或三控制器建
27、立集群,排除阵 列的单点故障,使其可用性高达99. 9999%o另外,8个独立的可自定义为主机或磁盘通道的光纤接口,使 BM3800B更加灵活,在服务器数量不多时,为用户节省光纤交换机的投入,在需要连接更多磁盘时,又可以 轻松调节。本方案中,7台JBOD最少只需1个磁盘接口即可。3)扩展性如上所述,一台BM3800B控制器最大可支持840块硬盘,这是由于其最多可以设定7个磁盘通道,而 每个光纤磁盘通道最多可连接127块硬盘来决定的,这是个非常惊人的数字,在存储业界内,UIT BM3800B 绝对是扩展性能最好的磁盘阵列。由于BM3800B优秀的扩展性,最大420TB的容量,所以非常适合50TB、100TB 以上的海量数据存储应用。7. 4方案价格比较图片说明:根据下图,我们可以看出本方案中所涉及到的3款产品在不同的存储容量需求时,其成本是不同的:1) 30TB容量存储以下时(200路摄像头以下),BS3000e有很好的性价比。2) 30-50TB容量存储时(200-350路摄像头),BS2000的价格优势有所体现,而BM3800B良好的扩 展性则具有更好的性价比。3) 50TB容量存储以上时(350路摄像头以上),BM3800B无疑是性价比最好的选择。图表4
限制150内