寻找大数据时代金融行业集中存储解决方案
2018-02-03陈添翼
□ 文/陈添翼
银行是我国最早安防应用领域之一,在新时期,历经诸多技术变革后,必然在存储系统出现新变化。
银行监控现状
目前我国有各类金融营业网点超过35万个,仅邮政储蓄网点就接近4万个。据有关部门预计,2018年,我国ATM机超过70万台。从每百万人口拥有的ATM数量指标来看,中国ATM需求缺口依然很大。与此同时,更加便捷的ATM机和自助银行将成为下一步各银行发展的重点。目前我国银行安防设备应用已基本形成五年一更新的规律,再加上每年对安防系统必不可少的升级工作,就形成了金融行业几乎每年百亿规模的安防市场需求。因此,我们需要了解到,偌大的市场,我们面对的现实是银行传统监控方案是各银行营业网点采用的是数字图像监控体系。该图像监控体系通常是基于本地监控,即各营业网点各自组建一个完整的监控体系,分别配有监控主机、监视器、数字摄像头等设备。
新时期,这种监控方案已经跟不上时代的发展,出现许多弊端:
复杂、成本高昂:各网点均需配备专人负责图像监控、设备保养维护等繁琐工作。
安全性低:由于监控中心维护均设在各网点本地后台,极易被人恶意破坏销毁监控信息数据。
响应慢:由于网点和支行之间无法共享监控图像信息,一旦网点有事件发生,上级单位不能及时全面地掌握有关情况。
若能在总行统一构建集中监控管理中心,将大大减少维护投入、管理成本,提升安全性和响应速度。而现今各网点构建专线网络,以及网络摄像、网络存储技术的成熟,为实现集中监控提供了技术保证。
大数据时代银行监控存储方案选择
我们所说的新时期,是指大数据安防的到来。大数据是信息技术与互联网产业发展到特定阶段的产物,从互联网到物联网,从云计算到大数据,信息技术正在从产业基础走向产业核心。而银行业作为与信息技术深度结合的行业,互联网思维和决策数据化已开始嵌入经营管理的全流程。大数据安防实质是能够为银行提供全方位、精确化和实时的安全保护和决策信息支持。所以,在银行行业集中存储的需求极为明显。
大数据时代银行监控的集中存储是在网点监控分中心的基础上,在总行设立统一的监控中心进行集中存储,从而节省人手,建立网点-支行-总行间的应急快速反应体系。而集中存储在金融行业比较成熟的技术有NAS、SAN两种,而SAN又可分为FCSAN和IPSAN两种。
文件级数据存储。NAS设备最主要的应用就是银行企业或部门内部的文件共享。由于NAS本身就是一台服务器,有自己的操作系统和文件系统,可以直接与本地局域网连接,提供文件级的数据共享,但NAS设备无法成为服务器的本地硬盘,无法提供数据块的存储。NAS是在局域网中传输,且有自己的操作系统和文件系统,这些因素都会导致NAS设备的带宽降低,增加NAS设备的读写响应时间。由此来看,该存储方式对于分行或者小银行企业的信息管理还适用,要架构大数据安防还需要很多地方完善。
IPSAN存储架构。IPSAN中所采用iSCSI通信协议实际上是一个互联协议,是SAN结构的一种。通过将SCSI协议封装在IP包中,使得SCSI协议能够在LAN/WAN中进行传输。该种方案目前而言在是银行大数据监控集中存储应用的主流。
市场就是躁动。作为IPSAN的同门,FCSAN在大数据安防时代不甘示弱,FCSAN最大的优势在于其出色的性能。目前的主流FC产品的带宽为2GB/s,4GB/s产品也已经相当普遍,这是FCSAN高性能的标志。而光纤磁盘本身的高性能,也为FC磁盘阵列提供了高速运转的基础。FCSAN的高性能带来的另外一个特点就是高成本,从光纤阵列本身到光纤磁盘再到光纤交换设备、光纤HBA卡等周边设备的成本都是最高的,而采用光纤磁盘阵列带来的管理维护成本,也将是用户一笔不小的开支。我们在金融行业大数据安防存储方案的优势有几点体现:光纤磁盘阵列的优势:
性能优势:
高录像带宽: 2G光纤磁盘阵列单通道数据写入带宽高达190MB/s,是采用千兆网的IPSAN/NAS存储设备写入带宽高4倍以上。
高并发浏览能力:2G光纤磁盘阵列并发读写能力,即录像加同时回放和浏览的总带宽约2.4Gbps。特别在监控图像检索查询中,IPSAN/NAS明显低于服务器本地硬盘的速度,而光纤存储不存在并发检索速度慢的问题。
高IO处理能力:2G光纤磁盘阵列单通道IO处理能力达30,000 IOPS。而采用千兆网接口的IPSAN/NAS技术,写入IO处理能力只有约3,000 IOPS。
低CPU占用率:由于数据打包、解包处理任务由光纤卡上CPU完成,降低了服务器CPU占用率。而IPSAN/NAS磁盘阵列往往使用服务器CPU处理数据打包、解包,将导致服务器CPU资源被占用。而存储服务器又恰恰需要更多的CPU资源。
稳定性优势:
传输可靠性:采用光纤连接,不受环境电磁干扰,数据传输可靠性高;错码率大大降低,图像质量能保证。因此,以往只有金融、电信等最高可靠性要求的环境使用。
协议处理稳定可靠:采用光纤卡硬件处理协议,稳定性最高。而IPSAN/NAS采用软件进行协议处理,稳定性受服务器环境影响较大,容易出现断网、断流和掉盘符现象。
独立网络,不占用视频传输网络带宽,保证视频传输更加稳定。
节约成本优势:
由于光纤盘阵比IPSAN/NAS录像带宽高4倍以上,以保证录像质量为标准,采用光纤磁盘阵列可大幅降低存储设备的使用台数。以银行100路高清为例,如果采用IPSAN/NAS存储,单台设备写入带宽约200Mbps。如要满足100路高清共800Mbps的写入带宽,则需要4台存储服务器和4台IPSAN/NAS磁盘阵列。而智慧仓光纤磁盘阵列单台写入带宽远高于1Gbps,因此只需要1台存储服务器和1台磁盘阵列就能满足100路高清(800Mbps)的录像带宽要求。
因此采用光纤磁盘阵列,用户在存储设备上的投资可节约多达4倍。即使银行用户需要保存时间较长,两种存储方式需要相同的容量,比如IPSAN采用4台24盘位磁盘阵列,而光纤采用1台96盘位磁盘阵列,智慧仓也能保证光纤盘阵的总体投资比IPSAN盘阵低50%左右。
结束语
面对金融市场的激烈竟争和信息技术的飞速发展,银行安防建设呈现了“数据集中化、业务综合化”的发展趋势,其建设重点也从布局数量向管理应用转变。与此同时,从标清升级到高清、金融大联网建设的实施,寻找最具性价比和最佳集中存储方案尤为重要。