爱数博客

全部 AnyBackup AnyShare AnyRobot

揭秘 AnyBackup 对象存储海量非结构化数据高性能备份恢复—— AnyShare 高性能备份恢复方案

4485 0 2020-12-22

非结构化数据遍布于各行各业,这类数据在金融、医院、档案馆、法院、检查院、制造等行业中尤为明显,他们都有着海量的非结构化数据,却难以管理,一旦发生数据损毁等意外时需要耗费大量人工紧急恢复或经历长达几天甚至几十天才能恢复完成。很多企业由于有着巨量的数据有时甚至无法完成一次完整的备份恢复,这为企业带来了难以弥补的损失。

经过不断的研发创新,爱数AnyBackup突破了海量非结构化数据备份恢复困难的业界瓶颈,与AnyShare联合推出 AnyShare 高性能备份恢复方案,为用户解决对象存储场景下海量非结构化数据保护难这一大困扰。
 

对象存储的数据保护之殇

过去,基于对象存储的备份恢复方式在面向海量非结构化数据时存在着严重壁垒,我们真实测算过客户在实际应用时备份恢复的情况:平均的备份速度在十几兆,所需备份时间都在数十天。

可以看出,对象存储在海量非结构化数据的备份恢复上存有着巨大的性能挑战,简而言之,对象存储在备份恢复上面临着2座大山:

  • 第一座是备份性能慢;

  • 第二座是恢复性能慢。

备份恢复性能低下的根本原因

首先,我们来看下磁盘的工作原理,磁盘的每一次IO读写,会包含3个动作:磁盘寻道+旋转延迟+数据传输,在这三个动作里,时间主要花在磁盘寻道和旋转延迟上。所以,在海量非结构化数据备份恢复的场景下,文件越小,相同的数据量,磁盘读取的次数越多,所消耗寻道时间和旋转延迟时间就越多,也就意味着,备份恢复所需要的时间就越长,也就是性能越低。

这就是为什么海量非结构化数据备份恢复性能低下的根本原因:单位时间内磁盘的吞吐率无法提升。

 

对象场景下高性能备份恢复方案

面对上述难题,AnyBackup进行了相关研究,设计并研发出了基于AnyShare的高性能备份恢复方案,有效解决了对象存储场景下海量小文件备份恢复性能低下问题。

 

基于AnyShare 7.0 突破性性能表现

可以看出,对象存储场景下不同大小的单一文件备份及恢复性能始终保持着高速稳定的性能状态,同等条件下随着文件越来越小,备份及恢复性能并没有降低。由此可见, AnyBackup对象存储场景下的高性能备份恢复方案,可以非常好地解决对象存储场景下海量非结构化数据的备份恢复挑战。

 

两大关键创新

AnyBackup之所以可以实现海量非结构化数据高性能备份恢复, 其中最关键的原因在于我们与AnyShare一起实现了两个关键创新:

OSS网关对象聚合技术

采用OSS网关对象聚合技术,在生产过程中 OSS 网关直接将 B 级、KB 级小文件聚合成 MB 级的大对象,确保对象存储里存的都是 MB 级大对象,再进行备份和恢复,这就极大地缩短了磁盘寻道和旋转延迟时间,从而提升了磁盘的吞吐率。

KB 级小文件聚合后备份性能效果:聚合后 KB 级别小文件备份性能由原来 15 MB/s 提升到 300 MB/s。

聚合对象大小可配置:小文件才会聚合,大文件无需聚合,聚合大小默认 20 MB,也可根据需求进行配置。
 

编排调度服务

AnyBackup编排调度服务,可以有效的编排AnyShare 的三个数据组件间的备份先后顺序,从而确保每个备份时间点下的AnyShare应用数据的一致性。
 

应用级任务:AnyBackup 把 AnyShare 系统当成一个应用数据集合,创建一个应用级任务,包含 AnyShare 所有的数据组件,并通过 AnyBackup 编排调度服务,编排各个数据组件的备份顺序和关联关系,从而确保每个备份时间点的数据对 AnyShare 来说都是一致性的。

请就本文对您的益处进行评级:

标签

产品方案

相关文章

热门标签

版本发布 在线教学

保持最新状态

保持最新状态

请输入有效的电子邮箱!

订阅

请在上方输入您的电子邮件,订阅最新博文

您已成功订阅,谢谢!

订阅失败,请重试!

扫码关注
「爱数官方微信」

扫码关注「爱数官方微信」

扫码关注「爱数官方微信」

扫码关注
「爱数服务号」

扫码关注「爱数服务号」

扫码关注「爱数服务号」

扫码关注
「爱数 E 家」

扫码关注「爱数 E 家」

扫码关注「爱数 E 家」

大数据基础设施领航者

抖音扫一扫

查看更多精彩视频

大数据基础设施领航者
联系我们
售前咨询
免费售前咨询热线
400 880 1569 - 1
售后咨询
7*24 小时免费售后服务热线
400 880 1569 - 2
请先输入您的联系方式:
确认提交

扫码关注

爱数技术支持中心公众号