一、整合hdfs
1、問題描述
開啟hue的web介面，出現報錯
cannot access: /user/hue. note: you are a hue admin but not a hdfs superuser, "hdfs" or part of hdfs[root@hadoop001 ~]# usermod -ag hdfs hue
[root@hadoop001 ~]# usermod -ag hadoop hue
1、問題描述
hue的web介面中無法檢視hbase資料
2、解決辦法
導航-hbase-配置
搜尋 hbase.thrift.support.proxyuser和 hbase.regionserver.thrift.http
新增
hadoop.proxyuser.hue.hosts
3、導航-hue-配置
搜尋 hue_safety_valve
CDH中Kafka配置問題
在chd5.16.2中安裝 kafka 2.1.1 1.2.1.1.p0.18,環境配置結束後測試kafka是否搭建成功 遇到以下問題 1.kafka建立生產者後用消費者消費時 bootstrap server 與 zookeeper的區別 在控制台上消費者命令不能 bootstrap server...
CDH中Sqoop的使用心得
cdh自帶兩個版本sqoop元件 這裡選擇1.4.6版本也就是sqoop1，1.99.5版本是sqoop2，是半成品，不支援關係型db到hive跟hbase，故不推薦使用 sqoop list databases connect jdbc mysql username root p111111sqo...
從CDH集群中移除裝置記錄
因為公司其他業務需要，從利用率不算太高的老舊集群中分出一部分機器用於其他業務。需要從舊cdh集群中刪除指定的機器。必須注意一點 hadoop預設副本數為3，所以一次最多移除兩台機器，hadoop集群需要時間來同步集群中block塊的確實副本 hadoop集群檢測到副本數量不足後，會自動從現有bloc...