【技术问答】非结构化数据从文件存储到对象存储的迁移,怎样去管理?

Sort:SDS百问 Release time:2021年07月16日
Share:

一般来说,从文件迁移到对象,涉及到访问数据的协议和方式转换,客户对应用没有办法做到无感知,同城需要配置定时任务,在业务不忙时发起迁移,第二天监控迁移到监控迁移到效果。在大型数据中心里面,这种情况尤其突出。在交付某券商客户对象存储项目时,客户原有NAS存储了近6000万文件,客户利用业务空窗期通过传统方式进行历史数据搬迁,耗时长达2个月,运维工作也需要持续的人力投入。



所以从应用的角度来考虑整个迁移的影响是非常重要的,为了实现无感知迁徙,可以先纳管文件存储中的数据,即将NAS中文件的存储路径关联到对象存储中,纳管完成之后,前端业务可通过S3接口直接访问NAS中的历史数据,后续新写入的数据则直接存入对象存储中。免去了数据迁移与校验的繁琐过程,业务上线的时间大大缩短。

 

杉岩数据在实际测试中,3个节点的对象存储集群,对1000万个文件进行纳管只需要90分钟,并且无需考虑文件大小。相比之下,使用传统方式迁移需要12个小时左右的时间。如果客户想要淘汰NAS存储,也可通过配置生命周期管理策略,系统自动将NAS中的历史数据逐步迁移到对象存储中,无需人为干预,满足数据平滑迁移需求,整个过程完全透明,用户无感知。




Your privacy is important to us

We use cookies to personalize and enhance your browsing experience on our website. By clicking "Accept all cookies", you agree to the use of cookies. You can read our Cookie Policy for more information.

Phone

Service Hotline

400-838-3331

More contact information

Top

Scan code attention