基础管理层可以说是整个云存储系统的核心所在,它担负着存储设备之间协同工作的重任,同时还要处理数据加密、数据分发以及容灾备份等一系列关键任务。这部分工作的质量直接决定了整个存储系统的稳定性和数据安全性,可以说是不可或缺的一环。
传统大数据存储系统的三种架构是什么?
访问层指的是授权用户通过应用接口来登录系统,然后享受各种云服务。说白了,这一层就是用户和存储系统之间的大门,保证了只有经过授权的合法用户才能访问相应的资源,在安全性方面还是比较有保障的,不会让未经授权的人随便进入。
云存储系统除上述优点之外,在平台对接整合、业务流程梳理、视频数据智能分析深度挖掘以及成本方面都将面临挑战。承建大型系统、构建云存储的商业模式也亟待创新,受限于宽带网络、Web2.0技术、应用存储技术、文件系统、P2P、数据压缩、CDN技术、虚拟化技术等的发展,未来云存储还有很长的路要走。
高清监控存储是一种以大码流多并发写为主的存储应用,对性能、并发性和稳定性等方面都有很高的要求。针对这种需求,该存储解决方案采用独特的大缓存顺序化算法,把多路随机并发访问变为顺序访问,解决了硬盘磁头因频繁寻道而导致的性能迅速下降和硬盘寿命缩短的问题。
云存储可以提供非常高的系统冗余和安全性。当在线存储系统出现故障后,热备机可以立即接替服务,等故障恢复时再进行服务和数据回迁;如果故障机的数据需要调用,可以将故障机的磁盘插入冷备机中,实现所有数据的立即可用,这样的设计大大提升了系统的可靠性。
对于高清监控系统来说,随着监控前端的增加和存储时间的延长,扩展能力显得尤为重要。目前市场中已有友商可以提供单纯针对容量的扩展柜扩展模式,以及性能容量同步线性扩展的堆叠扩展模式,用户可以根据自身的实际需求来选择合适的扩展方案。
传统大数据存储系统一般分为四个层次,分别是存储层、基础管理层、应用接口层以及访问层。存储层作为云存储系统的基础,由各种存储设备构成,这些设备需要满足FC协议、iSCSI协议、NAS协议等不同的协议标准,以确保数据传输的稳定性和兼容性。
在海量视频存储检索应用中,检索性能尤为重要。传统文件系统中,文件检索采用的是目录到子目录再到文件最后定位的检索步骤,但在海量数据的高清视频监控场景下,目录和文件数量十分可观,这种检索模式的效率就会大打折扣,而采用序号文件定位可以有效解决该问题。
当系统中会产生PB级海量监控数据时,存储设备的数量可能达到数十台甚至上百台,因此管理方式的科学高效就显得十分重要。云存储可提供基于集群管理技术的多设备集中管理工具,具有设备集中监控、集群管理、系统软硬件运行状态的监控、主动报警以及图像化系统检测等功能。
应用接口层是系统中根据用户需求来开发的部分,根据不同的业务类型,可以开发出不同的应用服务接口。比如有的用户需要视频监控服务,有的用户需要数据备份服务,这一层就是负责把这些服务封装好,方便用户直接调用和使用。