什么方法备份几百GB数据,文件数量5百万左右?

分类:Linux,工作记 | 作者:凹凸曼 | 发表于2012/05/22

备份分为全局备份和增量备份

前段时间,做了全局备份,采用的是nfs+shell

常说共享方式,本地复制解决,

编写shell里我加入了,磁盘短信通知(超过自定义的磁盘的容量)

全局备份 几百GB数据时要备份1天多,开始担心,备份时间过长,

会对nfs提供其他服务,产生影响

目前观察来看没有对其他服务造成影响

 

增量备份 :前几天看到 数据同步算法觉得挺不错的,还是用一下unix下的rsync

用它来实现rsync 增量备份,测试发现没有限制传输速度的时候 其中rsync 服务端,

非常耗cpu,负载攀升比较多,

特别值得注意的是,使用 rsync 的参数bwlimit 限制带宽

 

 

本文出自 “凹凸曼” 博客,请务必保留此出处http://www.apoyl.com/?p=1344

Tag:

日志信息 »

该日志于2012-05-22 17:44由 凹凸曼 发表在Linux, 工作记分类下, 留言已关闭,但你可以将这个日志引用到你的网站或博客。

目前盖楼 (0)层:

抱歉,评论被关闭

« »