大的数据并不是一种特定类型的数据。每一种非结构化数据均可被视为大数据。这包括在社交网站上的数据、在线金融交易数据、公司记录、气象监测数据、卫星数据和其他监控、研究和开发数据。大数据的量是巨大的而且是非结构化的。
监控储存发展现状
市场需求的多样性,为各种存储方案提供了市场空间。因此,在今后相当长的一段时间内,DVR、NVR、SDI-DVR和FCSAN、IPSAN等多种存储方案将共生共存。云计算和云存储有可能在未来几年内,对视频监控市场格局形成巨大冲击,并将视频监控产业推向一个新的、更高的发展阶段。
高清图像存储驱动高清监控产业发展坦率地讲,做高清存储市场调查是一件比较困难的事情。因为,现在的存储市场已经不是当年产品单一的DVR时代,对应前端摄像机的年出货量,就能统计和计算出DVR的年出货量;再按照当年DVR的销售均价,就能统计和计算出DVR的市场销售总额。随着这几年视频技术的飞速发展,安防监控已经进入智能高清和大数据时代,可以说视频监控技术和市场发生了质的变化。
随着安防产品和技术的不断提升,各行各业对视频监控图像质量的要求越来越高,随之对数据存储的要求也越来越高,这就必然会促进视频监控存储市场的变革。从应用层面讲,其实在所有的监控图像信息中,有用的往往只有1%甚至不到1%,99%的信息都是无用信息。但正是有了这99%%的无用信息的铺垫,才沉淀了1%的有用信息。
因此,不管是有用还是没用的视频信息,都要进行存储,这就势必会带来巨大的存储压力。视频监控图像往往是很多行业事件和案例中事后查证的重要证据,在社会治安监控、银行、司法等系统应用中,视频监控图像的存储时间往往都在1-3个月甚至更久。监控图像清晰度的提高,必然带来图像存储更大的压力。对于高清网络摄像机采集的高清图像,就需要网络存储系统(包括存储服务器和存储设备)。
监控存储系统选购原则
我们知道网络视频监控系统,其存储方式往往有两种选择,即分布式存储和集中存储。对于连锁商铺用户而言,由于其对视频监控系统的投入往往有限,并且如网络基础等一些必不可少的辅助系统投资也会精打细算,因此,集中存储的附加成本会远远大于分布式存储成本,同时由于网络传输的原因,也会导致集中存储数据丢失或系统中断。那么,在成本与实际需求的博弈中,选择什么样的监控存储系统更为合适呢?
海量数据存储原则:监控数据需要实时写入,存储时间从7天、15天……甚至1年,数量量随时间线性增长;大容量的存储、频繁的读写对于不同的存储方式,系统压力会有极大的差异。
高效性原则:视频监控主要是视频码流的写入,表征性能是存储能支持多少路码流(通常为384K~2Mbps)。在多路并发写情况下,视频监控对存储的压力是很大的,需要做专门的性能优化才能满足要求。
高性价比原则:无庸置疑,高性价比和成本节省是许多中小企业都非常关心的重要指标。除了比较IOPS、MB/s、配置与采购价格之外,毕竟视频录像数据就是视频监控系统的生命线,需要从总拥有成本的角度来综合考虑,包括人工支出、辅助系统成本、管理费用、能耗、服务,甚至投资保护和安全风险等隐性和潜在的支出。
适用性原则:中小企业的视频监控应用各有特点,不同的管理思路和网络基础环境对录像存储方式有着不同的倾向性,在选择录像存储方式时,要从实际应用环境出发,选择合适的系统设计,避免造成数据通路瓶颈。
安全性原则:监控系统都是7*24小时服务,要求视频数据随时存储和调用;视频录像数据的重要性是无庸置疑的,因此监控系统对存储的可靠性、性能和容量等方面都提出了新的要求,这也促使一些针对安防监控存储技术的产生,特别是对安全性要求较高的用户,更需要加以关注,如不同级别的加密,数据备份与容灾机制等。
可扩展性原则:成长型的中小企业往往面临快速变化和增长的业务环境,视频监控系统也会同步批量增长,如果存储系统容量和性能扩展能力不足,或者说在升级扩展时需要把原来的系统“推倒重来”,都会给企业发展带来了不良的影响。
功能丰富性原则:目前中小企业购买监控数据存储系统,需要的已经不是单纯的“存储空间”,往往随着企业的发展会用到一些高级功能,比如流媒体转发、异地备份、数据保护、多业务接口、扩展存储等。
管理方便性原则:由于中小企业IT人员少,技术力量较薄弱,如果监控视频存储系统过于复杂、不易管理和维护,无疑会大大增加企业的负担。因此在选择视频存储产品时,好用性和易用性也成为中小企业比较关心的重要因素。
当然,在考虑遵循以上原则的同时,用户必须清醒的认识一个现实,即连锁企业的视频监控,一定是一个基于网络的信号交互系统,必须依赖于网络,而国内的网络现状却非常令人无法释怀的,无论是专线、ADSL、CDMA、3G等,带宽都非常有限,并且实际和理论值相差很大,与先进国家相比,国内的所谓宽带,绝大多数还只能定义为窄带,数字视频传输将面临车多路窄的窘境。
结合以上原则和现实网络环境,在一些关注度高、有足够预算的连锁企业,采用集中式存储一定是理想之选,无论是对数据安全,还是对内部管理而言,都是真正意义上的统一管理。但考虑到大部分连锁企业对视频监控系统的重视程度,以及实际投入的资金限制,分布式存储、远程管理调用的存储方式会是目前普遍的选择。