這一周我學習了一下linux shell指令碼,然後按照教程嘗試搭建hadoop平台。然後我把我搭建hadoop平台的過程寫成了一篇部落格:過程很艱辛,遇到了許多問題。有些問題就馬馬虎虎的過了,但是並沒有搭建完成,最後遇到了乙個問題沒法解決,於是就一直擱置著。然後我打算學習python。估計程式設計20小時。
最後遇到的為解決問題:因為有乙個檔案位元組編碼是bom。所以報錯:
但是一直都不懂shell >是什麼,所以這個問題一直無法解決。
下一周我打算繼續搭建這個平台。然後試著學習些簡單的python的基本知識。
暑假周進度報告(七)
hdfs檔案操作 使用hadoop 使用者登入 linux 系統,啟動 hadoop hadoop 的安裝目錄為 usr local hadoop 為hadoop 使用者在hdfs 中建立使用者目錄 user hadoop 接著在hdfs的目錄 user hadoop 下,建立 test 資料夾,並...
暑假周進度報告(四)
hdfs體系結構 冷備份 發生故障以後,先停止一段時間,把一些資料從第二名稱節點慢慢恢復過來,恢復過來後再提供對外服務。hdfs儲存原理 冗餘資料儲存的問題 乙個資料塊會被預設儲存3份 可並行操作同一資料,加快資料傳輸速度 很容易檢查資料錯誤,有參照 保證資料可靠性 資料儲存策略的問題 2 資料讀取...
暑假周進度報告3
在本週中,學到了一些新工具,jdk api幫助文件的使用,在其中有 j a 所有類以及 j a 類的使用方法。在 j a 程式設計中可通過此檔案查詢對類的使用方法以及查詢導包。scanner random 以及arraylist 的使用,以上三個都屬於 l a.util 的類,在對 scanner ...