云存储让海量数据产生更大价值 可提高存储效率

分享到:

 

企业数据急剧膨胀,海量存储挑战愈加严峻。对于各类行业的用户而言,爆炸性增长的海量数据正如潮水般地冲击着他们的存储系统。同时,各行业对于数据的安全性要求也越来越高。特别是视频监控、高性能计算等行业,不仅对存储系统的容量、可靠性需求日益提高,而且对于传输带宽也提出了更高的要求。

  面对不断增长的数据,传统的存储架构由于扩展性较差,当用户容量及性能需求增加时,只能一味地添加高端存储设备。长此以往,存储环境就会变得日益复杂,管理和运营成本更高,并造成了过高的能源消耗。同时,过于复杂的存储架构和备份方式也很难满足用户日渐增长的数据管理和容灾需求。

  现在,云存储作为一种新兴的技术理念,正在改变着传统存储的提供与使用方式,也对存储行业带来了深远影响。作为国内少数拥有云存储开发自主知识产权和核心技术的厂商,UIT(创新科存储技术有限公司)经过长时间对IPTV、视频监控、互联网等行业用户存储应用的摸索实践指出,这些具有海量存储需求的行业用户,只有应用了更低成本、具有更高聚合带宽的云存储体系,才能满足其爆炸性增长的存储需求。其中,全新的大规模分布式云存储文件系统应用模式,将是海量存储和云存储结合的根本所在。

  分布式云存储系统有效提高海量数据存储效率

  云存储正在成为全球存储行业的发展潮流之一,云存储产品的应用范围正在不断扩大,并且客户群也更加细分。针对千差万别的行业应用需求,UIT认为,各行业用户只有应用创新的弹性系统架构,才能满足动态增长的存储需求。而结合其创新的弹性云存储系统架构,并采用了分布式存储技术和统一监控管理平台的大规模分布式云存储文件系统,将成为帮助各行业实现海量数据存储、容灾和备份的新模式。针对那些具有较大数据量和高并发访问的应用而言,大规模分布式云存储系统是一个能够提供海量存储空间,并支持灵活扩展、高性能访问的文件共享存储平台。全面适用于视频监控、流媒体、互联网等对数据存储和并发访问需求量较高的行业和用户。

  不同于传统的存储系统,分布式云存储系统专门针对大规模分布式数据处理和多媒体应用的特性而设计。一个分布式云存储系统由元数据服务器集群(master servers)和存储服务器集群(chunk servers)组成,并被许多客户端(Client)访问。其中,元数据服务器用来存储文件系统中所有的元数据,包括名字空间、访问控制信息、存储位置等,而存储服务器集群则用来存储用户的文件数据。当客户端访问系统时,首先会访问元数据服务器节点,获取将要与之进行交互的存储服务器节点的信息,然后便直接访问这些存储服务器节点完成数据存取,有效地防止了元数据服务器负载过重,大大提高了系统效率。

  在数据传输方面,分布式云存储系统集成了存储网关集群,第三方标准NAS客户端设备可以直接连接到UCSG网关来访问系统。而对于那些没有搭载第三方标准NAS客户端的工作站、个人PC、笔记本等设备来说,用户可以用云存储系统提供的客户端或以专用API的方式实现对系统的访问,这样,无论任何类型的用户,都能够方便地接入到系统中,极大地方便了用户的使用。

  分布式云存储系统能够实现海量数据的存储,系统支持数十PB级的容量,能够高效地管理上亿个文件,并具备优秀的在线扩容能力,当存储容量不足时,用户可以随意扩展存储空间容量,而不必中断业务运行。系统还具有无与伦比的高性能,能够提供高达几十个GB 的稳定聚合带宽以及每秒数十万个的文件查询效率。另外,系统中元数据服务器集群、存储服务器集群和网关集群均全部冗余,并搭载了独有的自动故障检测和高效的自动恢复和容错技术。这样,整个系统就不会存在单点故障,从根本上保证了连续性,并确保了系统的高可用性。同时,系统还自带了管理系统,配有简单易用的图形化管理和监控界面,支持用户通过专用的安全通道进行远程配置和全系统监控,从而满足了用户使用统一的平台对系统进行监控管理的要求,全面简化了管理复杂度。

  全面满足各行业用户大数据量和高并发访问的存储应用

  面对各行各业千差万别的云存储需求,UIT创新的弹性云存储架构都能够基于其自身的特点一一满足用户要求。对于视频监控行业而言,伴随着网络摄像机的普及,传统的监控系统正在进行着华丽的蜕变。现在,视频采集正在向高清的方向发展,720P甚至1080P实时监控已不再可望不可及;而庞大的IP网络资源,则使前端摄像头、编码器或视频服务器能够采用流媒体方式访问存储设备,并实现多路视频7*24*365地长时间写入同一个存储设备,使人们能够基本实现在任何地点、任何时间,都能够翻查自己的监控系统,随时得到所需的音视频及其他监控报警信息。而全新的监控模式也衍生了更庞大的存储容量需求和更高的带宽满足。新一代的高清视频监控系统带来了诸如百万像素所引发的高带宽、大规模海量数据存储、数据集中管理以及视频监控数据的安全等需求。在全新的应用需求的驱使下,视频监控的用户们是否还能继续使用传统的存储设备和管理方式?

  UIT创新的弹性云存储架构,全面突破了传统存储方式的性能和容量瓶颈。针对视频监控行业,UIT大规模分布式云存储文件系统能够提供PB级容量的存储容量和实时动态扩展,支持更大规模的高清摄像头接入,并让用户可以用标准客户端或专用API等多种方式方便地访问系统,实现海量高清视频文件的存储和调用。同时,云存储系统还实现了关键数据的可冗余保存,从而全面保证了关键视频录像的安全,有效增加了系统的安全性。有了大规模分布式云存储文件系统,视频监控用户就只需考虑摄像头和编码器等前端设备,通过接入网与云存储系统连接,方便地存储和调用视频图像,而不用考虑后端的存储和带宽压力,成功解决存储难题。

  而对于互联网行业用户,由于互联网行业都是以个人数据、小图片、小页面、小文件为主要存储对象,需要对数据进行反复的存储与使用。这就对存储系统提出了严格的频繁读写能力要求。利用大规模分布式云存储系统,互联网行业用户就能将云存储服务和IPTV、流媒体点播、播客、高清图片共享等应用相集成,获得优异的小文件读写性能,实现数据的在线存储和复制,并通过局域网与广域网,智能地在多个站点对这些数据进行分发,更高效地为最终用户提供互联网服务。

  作为最早从事云存储研发的厂商之一, UIT始终致力于推动应用与存储相结合,帮助用户从使用存储设备向使用存储服务相转变。今后,面对更加细分的客户群,UIT将在完善的研发体系和高水平开发团队的引领下,面向各行业用户推出应用了大规模分布式云存储文件系统的企业级解决方案,让云存储技术真正与客户需求实现结合,使具有海量数据存储需求的行业用户能够有效地管理和存储数据,让海量信息为企业创造更大的价值。