久久免费精品国产-国产婷婷色一区二区三区在线-91在线一区,亚洲乱码一区av黑人高潮,精品久久久久免费极品大片,久久一级精品视频

跳轉到主要內容

Linux環境大規模數據遷移

分類
故障描述

  客戶需要將150T數據從/backup遷移到/newnas目錄。

故障分析

  無

處理過程

1、分析目錄結構,盡量單個遷移任務遷移2-3T。

2、工具采用rsync -aPv --delete方式。

3、舉例

rsync -aPv /backup/data/2023-11-07 /newnas/data/ > /var/log/rsync/2023-11-07 &

4、根據目錄拉起多個任務:ls | xargs  rsync -aPv /backup/data/{}  /newnas/data/ > /var/log/rsync/{} &

5、路徑割接前,建議每小時同步更新一次。縮小最終割接增量更新時間。

6、由于rsync會對文件進行比對。默認是單進程,建議啟動多進程。

7、rsync運行過程中查看余下進程數watch -n 5 'ps -aux | grep rsync | grep -v grep | wc -l' //每五秒查看一次進程數。

建議/總結

  無