分布式分析管理平台Kylin安裝

2021-10-23 17:22:08 字數 1654 閱讀 5885

在cdh 5.3元件中安裝kylin 1.5.3

注意：安裝kylin前要檢視其對應的版本與hadoop版本是否匹配相容

1.將本地壓縮包上傳至/opt

2.解壓:tar -xzvf apache-kylin-1.3.0-bin.tar.gz

3.更改名字：mv apache-kylin-1.3.0-bin kylin

4.修改配置檔案kylin.properties：

vim /opt/kylin/conf/kylin.properties
主節點：kylin.server.mode=all

從節點：kylin.server.mode=job

在該檔案下加上三行內容

kylin.rest.servers=


10.5


.46.201


:7070


,10.5


.46.202


:7070


,10.5


.46.203


:7070


kylin.job.jar=


/opt/kylin/lib/kylin-job-


1.3.0


.jar


kylin.coprocessor.local.jar=


/opt/kylin/lib/kylin-coprocessor-


1.3.0


.jar
5.配置kylin的環境變數

sudo vim /etc/profile
//在profile中新增內容

export kylin_home=


/opt/kylin


export path=$kylin_home/bin:$path
//立即生效

source /etc/profile
6.啟動

//啟動

（1）cd opt/kylin/bin

（2）kylin.sh start

//停止

kylin.sh stop
7.登入，輸入**

輸入使用者名稱/密碼：admin/kylin

注：遇見的問題

mkdir: permission denied: user=root, access=write, inode="/":hdfs:supergroup:drwxr-xr-x

解決方法：在/opt/kylin/bin下，開啟check-env.sh

將hadoop fs -mkdir -p $working_dir變成sudo -u hdfs hadoop fs -mkdir -p $working_dir

數薈集分布式採集平台分析

一 概述 本產品是分布式 速度快 穩定 適用採集範圍廣 企業級產品，適合大資料量採集 日採集量在幾千萬 上億的資料量級別 對時效性要求高的企業，比如輿情公司和大資料分析公司，資料實時監控公司等。二 具體描述 1 分布式 由一台排程伺服器和多個採集節點組成分布式架構，排程伺服器可以同時管理多個節點節點...

分布式配置管理平台 Disconf介紹

disconf專注於各種分布式系統配置管理的通用元件 通用平台,提供統一的配置管理服務。一 功能特點 配置異構系統管理 極簡的使用方式 註解式程式設計 或 xml無 侵入模式 我們追求的是極簡的 使用者程式設計體驗良好的程式設計方式。目前支援兩種開發模式 基於xml配置或者基於註解，即可完成複雜的配...

分布式計算平台 Dryad

微軟正在研究開發的允許程式設計人員利用計算機集群 cluster 或者資料中心執行資料並行處理程式的乙個體系架構dryad,dryad是微軟對應於google的mapreduce技術。其體系結構圖如下 計算機集群的各個計算機之上是cluster service，用於提供集群內的計算機的最基本的管理。...