這是自己在fastdfs技術群裡關於集群整體遷移討論的聊天記錄
0.618(873085561) 11:10:34
有做過fastdfs檔案伺服器資料遷移的嗎??
龍(263209498) 11:11:08
fastdfs集群整體遷移的問題。
如果新舊ip位址一一對應,而且是一樣的,那非常簡單,直接將data目錄拷貝過去即可。
ip不一樣的話,會比較麻煩一些。
如果使用了v4的自定義server id特性,那麼比較容易,直接將tracker上的ip和id對映檔案storage_ids.conf修改好即可。
如果是用ip位址作為伺服器標識,那麼需要修改tracker和storage的data目錄下的幾個資料檔案,將舊ip調整為新ip。
注意storage的data目錄下有乙個.打頭的隱藏檔案也需要修改。
另外,需要將字尾為mark的ip位址和埠命名的同步位置記錄檔名改名。
檔案全部調整完成後才能啟動集群服務。
tracker server上需要調整的檔案列表:
data/storage_groups_new.dat
data/storage_servers_new.dat
data/storage_sync_timestamp.dat
storage server需要調整的檔案列表:
data/.data_init_flag
data/sync/$_$.mark:此類檔案,需要將檔名中的ip位址調整過來。
icedrugs(80825569) 11:11:25
最好不要用這種方式
icedrugs(80825569) 11:11:36
使用storage_ids 配置檔案
icedrugs(80825569) 11:11:39
來做對應關係
0.618(873085561) 11:12:19
還有就是為了使檔案系統更好的遷移,在搭建環境的時候有什麼需要考慮的?
龍(263209498) 11:12:39
很感謝各位的分享!
龍(263209498) 11:12:43
用這個檔案吧。
icedrugs(80825569) 11:12:52恩
龍(263209498) 11:12:59
這樣是不是遷移後,只需要修改這個檔案就ok了?
icedrugs(80825569) 11:13:11
修改對應ip
icedrugs(80825569) 11:13:16
盡量不去動id
龍(263209498) 11:14:05
en。遷移也只有ip會發生變化 。前面兩項不能動、
龍(263209498) 11:14:35
謝謝
FastDFS集群整體遷移的問題
fastdfs集群整體遷移的問題。如果新舊ip位址一一對應,而且是一樣的,那非常簡單,直接將data目錄拷貝過去即可。ip不一樣的話,會比較麻煩一些。如果使用了v4的自定義server id特性,那麼比較容易,直接將tracker上的ip和id對映檔案storage ids.conf修改好即可。如果...
集群之間資料的遷移
場景 舊集群的資料要遷移到新集群上面 hadoop distcp option hdfs master ip 8020 hive warehouse db tab name hdfs master ip 8020 hive warehouse db tab name option的內容可以hadoo...
TiKV 集群版本的安全遷移
在 tidb 的產品迭代中,不免會碰到一些相容性問題出現。通常協議上的相容性 protobuf 已經能幫我們處理的很好,在進行功能開發,效能優化時,通常會保證版本是向後相容的,但並不保證向前相容性,因此,當集群中同時有新舊版本節點存在時,舊版本不能相容新版本的特性,就有可能造成該節點崩潰,影響集群可...