大华微云存储系统：消除“数据烟囱”

□文/沃晶晶

大华微云存储系统：消除“数据烟囱”

□文/沃晶晶

在2016年贵阳大数据会议上，李克强总理指出，在大数据发展中要消除“信息孤岛”和“数据烟囱”。传统的数据存储模式既无法实现视频、图片、文档的统一存储，又不能支持对存储的数据进行高效的二次开发。

据统计，76%的全球数据是视频数据，而这其中绝大多数又是视频监控数据。随着视频监控服务的不断普及，超高清摄像机下的海量视频存储需求快速增长。近年来，广受市场认可的标准云存储产品能够满足大规模视频数据的存储需求，并且具备大容量、高可靠、易扩展的存储性能。

相关市场调研发现，小规模数据存储的需求是巨大的，但是中小规模经营单元如乡镇级边缘节点相对分散，由于容量的限制以往更多采用的是NVR/CVR建设，因此无法进行设备间的容错，难以横向扩展，视频处理分析速度慢，无法适应大数据时代需求，而标准云存储方案成本较高，用户难以承受。可见，唯有具备标准云存储特性又能适用于小规模存储场景的云存储产品才能满足此需求，基于此市场背景，大华微云存储系统应运而生。

大华微云云存储系统采用全新的设计理念，采用先进IT云存储技术、流媒体直存技术，可从成本、容量、空间可扩展性、服务可用性、系统可靠性、通用性等多个维度提升监控存储的效益，满足用户存储需求。

什么是“微云”？

大华微云云存储系统仅仅由存储节点组成。系统最小规模2台，支持横向扩展(Scale-out)方式的扩展，可弹性扩展至8台以后需要增加一对元数据服务器，即形成一套标准云存储系统。

该存储系统的存储节点支持流媒体直存功能，前端摄像头产生的视频流可以直接存储到后台录像数据中，提供高可靠性流媒体存储能力，以及强大的媒体转发能力。不需要另外再配置流媒体服务器和图片处理服务器，相比传统存储部署规模节省了很大的硬件配置空间。

微云云存储系统架构

大华微云可以实现几大功能：

分布式存储。系统采用文件切片，以及文件切片形式进行节点间冗余的数据分散方式，使得客户端可以有效利用众多存储节点提供的聚合网络带宽，实现高速并发访问。文件被分散到多个节点进行分布式存储，系统可自动根据各节点的IO负载、空间容量、CPU、内存负载等因素，调度数据流向，实现IO读写的负载均衡，从而使得整个系统的I/O高度并行，提高系统整体性能。

海量视频图片存储。提供视频录像、回放、检索服务，支持视频直存技术，兼容标准码流、主流视频流写入存储设备，能够直接接入GB/T 28181，ONVIF标准的前端设备，具备海量存储能力。

开放共享。通过多种保准接口满足不同应用，一套云存储以服务形式提供给各种上层应用使用，适应大数据应用的需求。如提供标准的NFS、CIFS、接口满足NAS访问;支持POSIX接口，可与任何Internet开发工具包搭配使用。

大华微云如何能达到这些先进性能？

大华微型云存储系统的最小规模设备数量仅需要2台节点，相比于标准云存储系统，大幅降低了首次部署成本。同时又保留了标准云存储的所有功能，如视频图片直存、故障自动感知和容错处理、节点间负载均衡管理等等，是名副其实的浓缩版标准云存储，大大提高了微云系统在小规模站所部署的性价比，是小规模用户选购云存储产品的首选方案。

标准云存储要求带元数据管理节点，才能够满足部署要求，对于小规模用户，不需要标准云存储那么大的部署规模。

另外，大华微云系统还具有设备级高可用、支持N+ M:b写入、物理节点感知、自由扩展等技术特性。

微云云存储的典型应用模式

中小企业、学校——

大华微型云存储系统的存储节点兼具运行元数据管理服务模块、数据存储服务模块、运维管理服务模块和流媒体服务模块。一体化的系统设计，只需2台存储节点，即可成云，无需单独配置元数据管理服务器，很大程度上节省了初期部署成本。

乡镇单位——

大华微型云存储系统的最小规模设备数量仅需要2台节点，相比于标准云存储系统，大幅降低了首次部署规模。同时又保留了标准云存储的所有功能，如视频图片直存、故障自动感知和容错处理、节点间负载均衡管理等等，是名副其实的浓缩版标准云存储，是小规模用户选购云存储产品的首选方案。

金融网点——

在存储容量相对较小的分支机构放置大华微型云存储系统，通过统一运维平台进行统一接入，为分支机构及中心提供高安全，高可靠的存储系统，通过多云分域方式进行统一管理、统一维护，同时具有横向扩容能力，按需购买存储空间，良好的开放共享能力为大数据应用提供帮助。

派出所——

最低只需2台存储节点的大华微型云存储系统的存储节点支持流媒体直存功能，前端摄像头产生的视频流可以直接存储到后台录像数据中，提供高可靠性流媒体存储能力，以及强大的媒体转发能力。不需要另外再配置流媒体服务器和图片处理服务器，相比传统存储部署规模节省了很大的硬件配置空间。

零售卖场——

大华微型云存储系统采用分布式的存储机制，将录像数据分散存储在多台独立的存储节点上。数据分布采用网络纠删码容错机制，利用流媒体集群技术，任何微云存储节点损坏，由其他备用的节点接替服务，从前端取流并执行录像业务,提供历史录像的读取播放，不影响录像读取工作，安全性高，达到了分散风险、节约成本的目的，是不错的初期尝试云存储系统的选择方案。

微云与传统视频存储集群的区别

由于微云系统在硬件形态上和传统视频存储集群比较相似，因此会有人误认为两者差不多，但是在软件层面，微云系统与传统视频存储集群有天壤之别的差距。

微云系统的软件，是完整的标准云存储系统，具备标准云存储所具有的全部特性，并且能够以文件形式共享适应大数据应用等，这是由于大华云存储使用了分布式架构而带来的先进特性。

而传统视频存储集群，本质上是一种多台单机存储的简单调度集群，其可靠性和性能本质上还是依赖单台设备，一旦设备发生故障，该设备的录像将彻底丢失，无法访问，因此它们并不具备设备级容错。用户读取录像时，由于录像只存在于一个节点上，速度会受限于该节点，无法做到多节点并行拉取数据，也就无法做到性能线性提升。

海量非结构化数据处理技术推动视频监控进入发展新纪元，云计算、大数据技术在行业内的发展演进，市场需求的不断深入催使企业进行新产品及技术的迭代开发，大华微云产品是继标准云、多云等云存储产品后的又一力作。

未来，大华云将持续深耕行业，凭借视频和安防领域积累、先进IT技术、互联网思维，持续创新，引领行业，不断推出面向海量非结构化数据基于云计算、大数据技术的数据感知、存储、分析和挖掘等相关的产品和服务，以打造尖端视频云生态平台，助力大数据时代的发展。