基於CDH5 4配置掛載HDFS檔案系統

2021-07-02 04:42:20 字數 1077 閱讀 4461

[author]:  kwu

基於cdh5.4配置掛載hdfs檔案系統

cdh 5 包含了fuse (filesystem in userspace)介面到 hdfs. hadoop-hdfs-fuse 安裝包讓 hdfs 集群 做為linux 的外部檔案掛載到磁碟中.

安裝fuse

安裝hadoop-hdfs-fuses在 red hat-compatible(centos)系統中:

$ sudo yum install hadoop-hdfs-fuse

安裝hadoop-hdfs-fuses在 ubuntu 系統中:

$ sudo apt-get install hadoop-hdfs-fuse

安裝hadoop-hdfs-fuses在sles系統中:

$ sudo zypper install hadoop-hdfs-fuse

執行mount命令:

$ mkdir -p #建立資料夾

$ hadoop-fuse-dfs dfs://://掛載到檔案系統中

如果使用了ha則

$ hadoop-fuse-dfs dfs://

操作示例:

mkdir /hdfs

hadoop-fuse-dfs dfs://nameservice1 /hdfs

hadoop-fuse-dfs#dfs://:fuse allow_other,usetrash,rw 2 0

操作示例:

hadoop-fuse-dfs#dfs://localhost:8020 /mnt/hdfs fuse allow_other,usetrash,rw 2 0

如果使用了ha如下:

hadoop-fuse-dfs#dfs://nameservice1 /hdfs fuse allow_other,usetrash,rw 2 0

採用 df -h 命令檢視,可看到掛載的hdfs盤,如下:

基於Docker安裝nginx以及配置https

https的證書 於阿里雲的ssl 2 建立掛載目錄 mkdir p opt nginx 4 編寫nginx.conf配置檔案,放在conf資料夾中 5 執行nginx docker run name nginx d p 443 443 v opt nginx conf nginx.conf etc...

H3C交換機基於埠VLAN的配置示例

以下內容摘自筆者2009年度巨作,獲得多項大獎,並在半年內成功重印的圖書 cisco h3c交換機配置與管理完全手冊 當當網 卓越網和互動出版網上都有得銷售。18.2.6 基於埠vlan的配置示例 為了幫助大家對以上vlan建立和基於埠vlan的配置方法有乙個全面的掌握,現例舉兩個典型的h3c交換機...

H3C交換機基於埠VLAN的配置示例

以下內容摘自筆者2009年度巨作,獲得多項大獎,並在半年內成功重印的圖書 cisco h3c交換機配置與管理完全手冊 當當網 卓越網和互動出版網上都有得銷售。18.2.6 基於埠vlan的配置示例 為了幫助大家對以上vlan建立和基於埠vlan的配置方法有乙個全面的掌握,現例舉兩個典型的h3c交換機...