混合云存储,备份、归档、容灾一个也不能少

人人都说,混合云/多云是未来。IDC曾预测,2018年,85%以上的大型企业都将采用混合云。RightScale发布的2018年云计算调查报告也显示出同样的趋势,81%的企业都有一个多云策略,其中又有51%的企业将专注于混合云。
常常与一线客户打交道的UMCloud CTO王璞指出:“当前,虽然很多客户可能不会马上用到混合云,但也不大会拒绝混合云,反而充满了期待。一个最根本的原因是,绝大部分客户现有的IDC资源是有限的,在IDC资源紧张时,客户希望在私有云的基础上能够更加灵活地调用公有云资源。这其实就是混合云最基本的一种应用模式。”
混合云是不是就是简单的“私有云+公有云”的形态呢?通常情况下,企业用户会从私有云起步,然后扩展到公有云,从而形成混合云,这也被定义为“正向混合云”。此时的混合云不仅仅是基于IaaS的云主机混合的概念,客户同时也产生了统一资源管理、统一存储管理和统一应用管理的需求。
今天,我们就要重点谈一谈混合云模式下的统一存储管理话题。

混合云存储管理的 “统一”

一谈到“混合”,这事一定不简单,可能会涉及不同的地点、不同的系统、不同的应用、不同的数据之间的连接、交换、流转和管理等。物理层面,通过专线的方式将公有云和私有云的打通只是混合云的初级阶段,企业用户更希望在数据层面、应用层面和管理层面都畅通无阻。王璞表示,UMCloud的核心战略是,推动混合云从更多层面,特别是从软件层面,包括IaaS、PaaS,帮助客户建立一个更方便、更易用的混合云。
混合云不是两个独立的数据中心的简单连接,而是从硬件到软件、从基础架构到应用各个层面全联通的一个统一的整体。
相对于统一资源管理、统一存储管理和统一应用管理的三类需求,统一存储管理对用户来说是一种更加普遍也更加急迫的需求。最典型的客户,如安防、医疗行业,他们有大量数据需要长期存储,如果能够根据数据访问的频繁程度将数据在混合云中进行分级存储、归档和保护,不仅可以更高效地管理数据,而且可以降低存储成本。
王璞进一步解释说,在混合云环境中,用户可以将一些敏感数据存储在私有云环境中(或本地数据中心),以保障数据的安全以及合规,而将另外一些非敏感数据存储在公有云上,用于归档、备份、容灾和分发等,两者结合可以创建一个更具整体价值的混合模式,让用户以更合理的成本获得与其需求相匹配的存储资源,从而帮助企业更充分地利用云存储的可扩展性和成本效益,确保资源和成本的最优化,而又不会损害任何关键业务数据。总之,混合云存储适合多种业务场景。

混合云存储到底能做什么?

UMCloud的统一分布式存储平台UMStor主要包含Cloud Sync、Cloud Archive和Cloud Import三大产品功能,可以有效解决多中心数据同步、关键数据容灾备份、历史数据归档、归档数据抽取等数据存储和管理问题,实现了真正意义上的存储无边界。
混合云存储,备份、归档、容灾一个也不能少

1) 数据同步,Cloud Sync实现多数据中心无缝同步
为满足高安全性和监管的要求,有些数据必须存储在私有云中,而大量非关键数据考虑到成本因素可以存储到公有云上。为了解决多数据中心的数据同步问题,就要用到Cloud Sync,它可以在私有云和公有云之间完成实时的异步数据存储。实际上大多数客户,包括电子商务系统、Web网站、移动端产品等都有类似的需求,为了应对业务规模的爆发增长和实现存储的灵活伸缩,倾向于采用混合云存储的模式。
一个典型案例是,某大型国营企业在北京、广州多地采用传统的文件存储方式进行存储,由于存储的数据文件激增,文件索引本身变得庞大,导致存储的读写性能大幅降低。采用UMCloud的两地四中心解决方案后,通过Cloud Sync实现两组主备数据中心的单向数据同步,再结合通过元数据同步实现四中心的统一命名空间管理,实现了北京、广州两地的30PB规模的数据双活同步,可以提供高可靠、高安全性和高扩展性的云存储服务。
王璞说,他遇到很多客户上来的第一个问题就是如何才能更好地实现灾备。通过混合云的方式实现数据的分层归档和灾备,这是当前比较集中的一类需求。从整体上说,无论是数据备份还是异地容灾,混合云都可以胜任。但是对于最高难度的异地双活,仅靠混合云存储还不能完全解决问题,还要加上应用层面,比如数据库的双活。“如果客户的某些业务不要求7×24小时在线,能够容忍一定时间的停机,无论是异地容灾还是异地双活,我们的混合云存储都能派上用场,可以实现业务的从容切换。而这已经能够覆盖目前绝大多数用户的需求。”王璞表示。
采用混合云存储,灾难恢复能够达到秒级还是分钟级关键还要看带宽。从UMStor统一分布式存储平台的角度看,它能够实现准实时异步同步。比如,客户在私有云中部署一套存储软件,在接到请求后可以马上发起异步请求,与UCloud公有云专区里的存储平台对接。因为是异步请求,所以会受限于网络带宽。在比较理想的情况下,同城较近距离、几个G带宽的专线,UMStor统一分布式存储平台可以做到秒级恢复甚至几百毫秒、几十毫秒级的数据同步的延迟。
混合云存储,备份、归档、容灾一个也不能少

2)分层存储,Cloud Archive实现精细化的成本控制
Cloud Archive归档存储可与对象存储深度融合,通过数据冷热分层技术,实现数据的生命周期管理,在节省存储成本的同时保障企业级存储资源的多级完整纳管。具体来说,Cloud Archive可自动将公有云平台上对象存储系统中的冷数据迁移归档至冷存系统,冷存系统写入接口完全兼容对象存储,从而减少对接开发工作量。经UMCloud测试,采用混合云进行分级存储,在非实时高可用场景下,存储成本可降低80%;在使用归档存储的情况下,成本仅为独立建设灾备集群的成本的五分之一。
用户可以通过UMStor统一分布式存储平台建立多个不同冗余策略的存储池,核心业务数据可以保存在三副本存储池中,即使发生故障,只要三个节点中的任意一个存活,数据就不会丢失。王璞介绍说:“通过多副本技术、纠删码策略、服务端加密、端到端数据完整性效验、提前预测磁盘故障等技术和机制,我们可以确保数据的安全。”
一个典型的案例是,某金融行业的客户采用UMStor统一分布式存储平台进行了分层处理:1. 30天内的审计日志数据的存储采用三副本冗余策略;2. 超过30天的数据自动迁移至纠删码存储池中;3. 超过1年的历史数据存储在独立的外部归档存储中。这样的分层存储策略,实现了更精细化的成本控制。
另一个典型的案例是安防数据的存储。摄像头中的数据到少要保存3个月甚至半年,尤其是高清摄像头的出现,给存储数据造成了极大的压力。有些数据又是非常敏感的,不能随随便便全部存储到公有云中。因此,UMCloud为客户提供了混合云分层存储方案,将热数据留在本地私有的数据中心,而温数据或冷数据放到UCloud公有云的托管专区中。另外,针对温数据和冷数据还可以通过无损压缩甚至有损压缩的不同方式进行存储,可以节省带宽和储成本。这已经是一种比较成熟的应用。
混合云存储,备份、归档、容灾一个也不能少

3)“下云”也*,Cloud Import避免用户被厂商锁定
不管是因为技术上的限制,还是厂商竞争的原因,现在有些厂商只能帮助用户上云,反之则不行。但是,混合云既然是私有云、公有云的一个统一体,那么上云或是下云应该是由应用决定的,而不是由厂商决定的。UMCloud可以保证用户上下云畅通无阻,简单说,Cloud Sync负责数据上云,而Cloud Import负责将从公有云上的数据迁移到本地。
王璞介绍说,Cloud Import的云导入功能是UMStor统一分布式存储平台在实际使用过程中遇到的一个新的业务场景。当客户的存储达到一定规模后,客户会发现,私有云存储的成本低于公有云存储,这时将公有云中的部分数据迁移到私有云中可能是一个正确的决定。UMStor统一分布式存储平台的部分客户一开始使用了公有云中的对象存储,而当非结构化数据体量增大之后,公有云存储服务已不能满足需求,而私有云存储的优势在于可以进行更多的定制化开发,满足客户的个性化存储管理需求。UMCloud可以保证数据在公有云和私有云中*流动。
一个典型的案例是,某互联网行业的用户在其体量达到一定规模后,希望通过自建存储平台来实现数据的备份,以达到优化存储成本的目的。该客户基于UMStor自建了两地的私有化数据中心,通过Cloud Import将公有云上的数据无缝迁移至UMStor对象存储,实现云端数据到本地数据的同步以及数据的本地化备份和归档。
王璞表示,备份、分层存储和归档,以及异地容灾,这是混合云的几种典型应用模式。现在,UMCloud的混合云存储只是针对分布式存储,还不能对接传统的集中式存储,比如SAN。在对接公有云方面,由于UMStor支持S3存储标准,所以只要支持S3存储标准的公有云原则上都可以无缝对接。

与业务场景息息相关

谈到UMCloud混合云存储的独特价值,王璞表示:“传统存储是与应用无关的,而我们做混合云存储,一个核心理念就是针对一些特定的业务应用场景的需求。传统的硬件存储有非常标准化的接口,如iSCSI等,可以基本做到对所有应用程序兼容,因此传统硬件存储不大考虑具体的应用场景。而我们是一个新兴的厂商,不希望与传统硬件存储正面竞争,需要寻找差异化,结合具体业务场景的存储就是我们的一个突破口。比如,冷存归档,以及针对图像和音视频数据的有损或无损压缩,目的是更有效地提升存储效率,降低存储成本。”
紧紧围绕着云做文章,这也是混合云存储的立足之本。无论是Cloud Sync还是Cloud Import,这些功能都是结合客户的云应用场景,实现数据在本地和云,以及不同云之间的双向传输,以及Cloud Archive的分层存储,优化存储成本。这些都是客户的真实需求。
一句话,UMCloud的混合云存储只针对具体的业务场景,实现特定的功能,解决用户真实场景的实际问题。

上一篇:Android中事件传递机制的总结


下一篇:HTAP数据库 PostgreSQL 场景与性能测试之 34 - (OLTP+OLAP) 不含索引单表单点写入