計算集群： 集群1 （hadoop , hive, ）
儲存集群： 集群2 (hadoop, hive ,hbase)
需要core-site.xml, hbase-site.xml, hdfs-site.xml, hive-site.xml, mapred-site.xml, yarn-site.xml
hbase-site.xml 從儲存集群拷貝
其餘的配置檔案全是計算集群
兩個集群的dfs.nameservices 不能相同
在hdfs-site.xml 配置檔案中需要將儲存集群的資訊加入
dfs.nameservices
ns1,nameservice1
dfs.client.failover.proxy.provider.nameservice1
org.apache.hadoop.hdfs.server.namenode.ha.configuredfailoverproxyprovider
dfs.ha.namenodes.nameservice1
namenode815,namenode765
三 kylin讀寫分離集群部署
1 部署圖 注意 1 在kylin服務機器上hbase shell 作為儲存hbase集群的客戶端，配置需要儲存集群的客戶端配置，cdh 的hbase配置路徑在 etc hbase conf下，hbase site.xml 中不能包含hdfs的資訊，不然計算集群會使用hbase的hdfs配置，只包含...
mysql 讀寫分離（實戰篇）
mysql proxy最強大的一項功能是實現 讀寫分離 read write splitting 基本的原理是讓主資料庫處理事務性查詢，而從資料庫處理select查詢。資料庫複製被用來把事務性查詢導致的變更同步到集群中的從資料庫。jan knes在 mysql prox程式設計客棧y learns ...
kylin入門到實戰 入門
kylin是一款開源的分布式資料分析工具，基於hadoop之上的sql查詢介面，能支援超大規模的資料分析。響應時間在亞秒級別，其核心是預計算，計算結果存放在hbase中。3.1fact table 事實表 事實表是指包含了大量不冗餘資料的表，其列一般有兩種，分別為包含事實資料的列，包含維表forei...