大数据应用架构下视频监控云存储发展
虚拟化是云存储的主要特征之一。存储领域国际权威机构SNIA(存储网络工业协会)给出了存储虚拟化(Storage Virtualization)的定义:“通过将存储系统/子系统的内部功能从应用程序、计算服务器、网络资源中进行抽象、隐藏或隔离,实现独立于应用程序、网络的存储与数据管理”。存储虚拟化技术将底层存储设备进行抽象化统一管理,向服务器层屏蔽存储设备硬件的特殊性,而只保留其统一的逻辑特性,从而实现了存储系统的集中、统一、方便的管理。
与传统虚拟化存储相比,基于“裸数据块”的虚拟化存储化技术,不仅继承了“磁盘利用率高” 和“管理方便”的特点,还能将文件系统的风险及碎片问题彻底解决。
高磁盘利用率
传统存储技术的磁盘利用率一般只有30-70%,而采用虚拟化技术后的磁盘利用率高达95%;存储灵活,可以适应不同厂商、不同类别的异构存储平台,为存储资源管理提供了更好的灵活性;
管理方便
管理方便,提供了一个大容量存储系统集中管理的手段,避免了由于存储设备扩充所带来的管理方面的麻烦;性能更好,虚拟化存储系统可以很好地进行负载均衡,把每一次数据访问所需的带宽合理地分配到各个存储模块上,提高了系统的整体访问带宽。
无文件碎片及文件系统问题
云存储是炙手可热的“大数据”中组成之一:存储单元模块。“大数据”中提及富媒体资源指的就是视频监控业务产生的大量数据,占比巨大的富媒体信息中的载体为存储设备和云存储解决方案。
存储设备或云存储解决方案作为视频监控里中结构化和非结构化数据的载体,横跨基础架构、内容信息三个维度的信息化建设的基础。如果将“富”媒体中的视频信息,从底层的动态存储到以事件或物理为索引的信息分析,再到将海量的非结构化数据转化成信息和洞察力,做到真正的“为人所用”,才是大数据的真正魅力所在。
监控特色的数据仓库
数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策。 数据仓库是一个过程而不是一个项目;数据仓库是一个环境,而不是一件产品。数据仓库提供用户用于决策支持的当前和历史数据,这些数据在传统的操作型数据库中很难或不能得到。
监控特色的数据仓库技术是为了有效的把基础视频库中的录像信息,按照某些特性或逻辑或定义的结构类型,进行信息的提取,作为数据集成到统一的环境中以提供决策型数据访问的基础。目的做的一切都是为了让用户更快更方便查询所需要的信息,提供决策支持
传统的数据处理和加工是:从外界存储取出来数据,被应用程序或其他系统程序所读取并计算处理,处理完毕将其放入程序里面,整个业务流有多个处理环节,要不断地存储、读取、计算、再存储,其系统的大量时间花费在数据的迁移上,一旦数据量增加,从数据向计算迁移的环节就肯定“费时费力”。
大数据整理架构发展趋势下,将管理的重点由以前的“设备”为中心,衍变成以“数据”为核心的模式。用户根据数据具体分布,推送部署计算单元,大大节省额外的空间计算消耗。
数据可视化
无论是单一的存储设备,还是IT或监控云存储的解决方案,其核心都是作为数据的载体。任何行为本身都会产生数据,视频监控业务中每个物体的轨迹、每秒中呈现的数据,都是就是大数据的最原始雏形,但雏形不等于本质,拥有这些轨迹数据的本质,才能更全面、更清楚的对原始数据的认知。
数据可视化技术的基本思想是将数据库中每一个数据项作为单个图元元素表示,大量的数据集构成数据图像,同时将数据的各个属性值以多维数据的形式表示,可以从不同的维度观察数据,从而对数据进行更深入的观察和分析。主要旨在借助于图形化手段,清晰有效地传达与沟通信息。但是,这并不就意味着,数据可视化目的为了有效地传达“数据”的过去状态的呈现及未来状态的预测,通过直观的数据传达关键的方面与特征,从而实现对于相当稀疏而又复杂的数据集的深入洞察。
监控视频数据可视化依据数据及其内在模式和关系,利用计算机生成的图像来获得深入认识和知识。模拟感觉系统的广阔带宽来操纵和解释错综复杂的过程、涉及不同学科领域的数据集以及来源多样的大型抽象数据集合的模拟。
监控视频数据可视化是大数据架构下的特征产物之一,通过视频云存储作为承载。“可视化”的实现能打破成熟的科学可视化领域与较年轻的信息可视化领域间的技术壁垒,同时也是一条铺满荆棘的探索之路。
【作者单位:浙江宇视科技有限公司】
声明:
凡文章来源标注为"CPS中安网"的文章版权均为本站所有,如需转载请务必注明出处为"CPS中安网",违反者本网将追究相关法律责任。非本网作品均来自互联网,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。
- 第1页:海量视频数据的存储和管理
- 第2页:恒定码流的高并发写入
- 第3页:基于裸数据块的视频云直存虚拟化技
征稿:
为了更好的发挥CPS中安网资讯平台价值,促进诸位自身发展以及业务拓展,更好地为企业及个人提供服务,中安网诚征各类稿件,欢迎有实力安防企业、机构、研究员、行业分析师。投稿邮箱: cps-tougao@cps.com.cn(查看征稿详细)