EN
提示
  • 关于我们
  • 技术文章
  • 【技术问答】非结构化数据从文件存储到对象存储的迁移,怎样去管理?

【技术问答】非结构化数据从文件存储到对象存储的迁移,怎样去管理?

发布于2021-07-16

  • 对象存储

一般来说,从文件迁移到对象,涉及到访问数据的协议和方式转换,客户对应用没有办法做到无感知,同城需要配置定时任务,在业务不忙时发起迁移,第二天监控迁移到监控迁移到效果。在大型数据中心里面,这种情况尤其突出。在交付某券商客户对象存储项目时,客户原有NAS存储了近6000万文件,客户利用业务空窗期通过传统方式进行历史数据搬迁,耗时长达2个月,运维工作也需要持续的人力投入。



所以从应用的角度来考虑整个迁移的影响是非常重要的,为了实现无感知迁徙,可以先纳管文件存储中的数据,即将NAS中文件的存储路径关联到对象存储中,纳管完成之后,前端业务可通过S3接口直接访问NAS中的历史数据,后续新写入的数据则直接存入对象存储中。免去了数据迁移与校验的繁琐过程,业务上线的时间大大缩短。

 

杉岩数据在实际测试中,3个节点的对象存储集群,对1000万个文件进行纳管只需要90分钟,并且无需考虑文件大小。相比之下,使用传统方式迁移需要12个小时左右的时间。如果客户想要淘汰NAS存储,也可通过配置生命周期管理策略,系统自动将NAS中的历史数据逐步迁移到对象存储中,无需人为干预,满足数据平滑迁移需求,整个过程完全透明,用户无感知。




分享至:

联系

我们

400-838-3331

在线

客服