java程式設計師的大資料之路(4) 程式設計呼叫HDFS

2021-08-07 08:36:48 字數 1889 閱讀 8592

先來看一下包結構

首先利用之前執行過的wordcount類進行測試,執行前不刪除之前的輸出目錄,在執行**前加入以下**:

ihdfsservice hdfs = new hdfsservice();

hdfs.rmr("/user/jackeyzhe/output");

執行後在控制台可以看到

並且執行成功,證明刪除目錄方法沒有問題。

測試cat和ls方法,控制台列印如下:

haha    3

hehe 1

jackey 1

jackeyzhe 1

ls********************=

name: hdfs: folder: false, size: 0

name: hdfs: folder: false, size: 35

********************=

其他的測試不一一枚舉。

至此我們已經可以通過程式設計呼叫hdfs了

hadoop程式設計呼叫hdfs

Java程式設計師在用的大資料工具

問題 他們最近一年最喜歡用什麼工具或者是框架?開發語言 web框架 資料庫工具 sql資料 大資料開發工具 雲 商 現在,來看看維基百科上對大資料的定義 大資料,廣義上來說是一組量很大很複雜的資料集合,在這種情況下傳統的資料處理方式將不再適用。對於一般情況來說傳統的sql資料庫足夠用。再另外一些場景...

我的程式設計師之路 4 工作半年

時間過得很快,轉眼間又到新年了。2010年4月30號拿到畢業證 學位證,我就正式畢業了。原本計畫在長春導師的公司工作的,三方協議也籤了,可一些原因,我還是先選擇了離開。離開了也好,至少過年回家可以近些。準備回太原的,可回太原面試了一家公司,工資待遇太低,月薪兩千,租房也不便宜啊。最後選擇了北京,來北...

我的程式設計師之路

四年前,也就是我高考的那一年,我陰差陽錯的被調劑到電腦科學與技術專業,當時的我並不知道計算機到底具體可以用來幹什麼,只知道21世紀的人,沒有乙個不會計算機的,所以,當時覺得學這個專業,將來找工作,肯定沒有優勢,因為大家都會,但是,上了大學,我才明白計算機真正的用途,我不是我理解的那麼膚淺。c語言,是...