hdfs hadoop distributed file system 分布式檔案儲存
1.主從式架構
2.儲存資料時，沒有物理上線
注意：
hdfs集群 不適合儲存大量的小檔案
hdfs集群 儲存的檔案 使用一次寫入多次操作場景
namenode集群中主節點（記憶體）
1.維護了樹狀目錄結構
2.記錄了檔案的基本資訊
3.儲存了塊資料與datanode對應關係
datanode硬碟
1.塊形式儲存資料 128m
2.副本3個機架感知
3.校驗
fsimage某一時刻前的資料映象 格式化 後續符合條件重新啟動
editslog某一時刻後的寫日誌
60分鐘或者10萬事務數滿足時secondarynamenode會進行fsimage，editslog的合併。
HDFS架構簡述
hdfs架構簡述 一 hdfs簡介 hdfs hadoop distributed file system hadoop分布式檔案系統。是基於流資料模式訪問和處理超大檔案的需要而開發的，可以執行於廉價的伺服器上。它所具有的高容錯，高可靠性，高可擴充套件性，高獲得性，高吞吐率等特徵為海量資料提供了不怕...
Redux中的重要概念
首先，先看看第一張圖，圖中展示了redux的單向資料流，以及action reducer和store這三個核心概念。下面就圍繞上圖，非別介紹action reducer和store這三個概念。action是乙個物件，用來代表所有會引起狀態 state 變化的行為 例如服務端的響應，頁面上的使用者操作...
tensorflow中的重要概念
1.checkpoint model.ckpt.data 00000 of 00001 某個ckpt的資料檔案，儲存每個變數的取值，儲存的是網路的權值，偏置，操作等。2.model.ckpt.index 某個ckpt的index檔案二進或其他格式,不可直接檢視,是乙個不可變的字串表，每乙個鍵都是張量...