資料探勘 5 Zookeeper集群搭建

2021-08-10 14:22:08 字數 552 閱讀 1008

安裝zookeeper-3.4.5.tar.gz

1,安裝jdk

2,安裝zoookeeper

datadir=/root/zkdata

clientport=2181

#編寫一下內容 leader埠:follow埠

server.1=192.168.10.10:2888:3888

server.2=192.168.10.11:2888:3888

server.3=192.168.10.12:2888:3888

儲存退出

3, 建立zkdata目錄,完成zookeeper配置將zookeeper檔案拷貝至hdp11,hdp12,並將相應的數字寫入對應的myid檔案

4, 啟動zookeeper5, 啟動客戶端6, 使用ssh遠端啟動zookeeper

分布式5 zookeeper分布式

一 為什麼需要zookeeper 大部分分布式應用需要乙個主控 協調器或控制器來管理物理分布的子程序 如資源 任務分配等 大部分應用需要開發私有的協調程式,缺乏乙個通用的機制 協調程式的反覆編寫浪費,且難以形成通用 伸縮性好的協調器 zookeeper可以提供通用的分布式鎖服務,用以協調分布式應用,...

資料探勘 資料歸約之大型資料集的維度

前言 雖然大型資料集可能得到更佳的挖掘結果,但未必能獲得比小型資料集更好的挖掘結果 對於多維資料,乙個主要的問題是在所有維度中搜尋所有挖掘方案之前,是否可以確定某方法在已歸約資料集的挖掘和發現中國發揮得淋漓盡致。一 大型資料集的維度 資料的描述以及特徵的挑選,歸約或轉換可能是決定挖掘方案質量的最終更...

資料探勘小白之旅task5

模型融合是比賽後期乙個重要的環節,大體來說有如下的型別方式。什麼是 stacking 簡單來說 stacking 就是當用初始訓練資料學習出若干個基學習器後,將這幾個學習器的 結果作為新的訓練集,來學習乙個新的學習器。生成一些簡單的樣本資料,test prei 代表第i個模型的 值 test pre...