今天進行了spark的安裝。
右擊,複製鏈結如下
在master的命令列中輸入:
wget
複製結果如下:
輸入命令:wget
2.2 解壓
輸入命令:tar zxf spark-2.4.0-bin-hadoop2.7.tgz
2.3 遷移目錄
輸入命令:sudo mv spark-2.4.0-bin-hadoop2.7 /usr/local/spark/
2.4 配置環境變數
輸入命令:sudo gedit ~/.bashrc
新增如下配置
使配置生效,輸入命令:source ~/.bashrc
3.1hdfs常用操作
上傳檔案
hdfs dfs -put src… dest (從本地的src位置上傳到hdfs的dest位置,src可以有多個,空格隔開)
複製檔案
hdfs dfs -copyfromlocal src… dest (複製檔案,從src位置複製到dest 位置,src可以有多個,空格隔開)
移動檔案(剪下)
hdfs dfs -movefromlocal src… dest (移動檔案,從src移動到dest位置)
建立新目錄
hdfs dfs -mkdir /test
hdfs dfs -mkdir -p /test/luo (級聯建立)
檢視檔案內容
hdfs dfs -cat /test/t1 (檢視/test資料夾下的t1檔案)
更改檔案的屬組
hdfs dfs -chgrp nb /test/t1 (把t1 檔案的屬組改為nb)
hdfs dfs -r -chgrp nb /test/t1 (遞迴修改)
更改檔案的許可權
hdfs dfs -chmod -r 777 /luo (/luo的許可權改為777)
更改檔案的屬主及屬組
hdfs dfs -chown -r luo:zzz /luo
將hdfs上的檔案複製到本地
hdfs dfs -copytolocal /t1 ./
檢視檔案系統的磁碟空間
hdfs dfs -df -h /
寒假OS學習第四天
接下來將進入x86保護模式程式設計的一些細節。從80386處理器開始,cpu有了四種執行模式 實模式保護模式 虛擬8086模式 smm模式工作模式是指cpu的定址方式 暫存器大小等。cpu的實模式 在8086時代,cpu以實模式執行 cpu剛剛上電後,也以實模式啟動 參考資料 最開始的時候,cpu一...
第四天學習
一 權重關係 樣式表的權重關係 內聯樣式表的權重最大!內部和外部樣式的權重,和書寫的前後順序有關!放在後面的會把放在前面的樣式覆蓋掉 網頁的布局 先做上下排版 再做左右排版 從外往裡 二 css語法 選擇符選擇符 選擇符就是給標籤起名字 型別選擇符 標籤選擇符 所有的html標籤可以直接當做選擇符進...
C Primer學習第四天
第四章 陣列和指標 c 語言提供了兩種類似於vector和迭代器型別的低階復合型別 陣列和指標。與vector型別相似,陣列也可以儲存某種型別的一組物件 而它們的區別在於,陣列的長度是固定的。陣列一經建立,就不允許新增新的元素。指標則可以像迭代器一樣用於遍歷和檢查陣列中的元素。現代c 程式應盡量使用...