版本資訊
系統/軟體名
版本
centos
centos linux release 7.3.1611
hadoop
hadoop-2.7.4
hive
apache-hive-2.1.1-bin
hbase
hbase-1.4.0
zookeeper
zookeeper-3.3.6
sqoop
sqoop-1.4.6.bin__hadoop-2.0.4-alpha
kylin
apache-kylin-2.3.1-bin gp
greenplum-db-4.3.8.2-build-1-rhel5-x86_64
集群環境
節點
記憶體
磁碟
服務
bigdata-3-22
15g50g
namenode
,secondarynamenode, datanode,quorumpeermain,metastore,hmaster,hregionserver,jobhistoryserver,resourcemanager,nodemanager,kylin,greenplum
bigdata-3-23
15g50g
datanode
,hregionserver,quorumpeermain,nodemanager,greenplum
bigdata-3-24
15g50g
datanode
,hregionserver,quorumpeermain,nodemanager,greenplum
gp環境
ip
秘鑰
資料庫
表名
儲存方式
資料量
192.168.***.***
xxgxx/***
testdb
dw_test_data
行式/無壓縮
45w10.5.***.***
***/***
testdb
dw_test_data
行式/無壓縮
100w
kylin/gp sql查詢語句和平均執行時間
資料庫
sql
平均執行時間(s)
資料量(萬條)
結果數(條)
kylin
select
rq,
gngw,
jjdq,
wp,
jjrlx,
jjrxb,
jjrnld,
sum(jdl),
sum(wtdl),
sum(t**dl),
sum(tqwtdl),
sum(syjdl),
sum(sywtdl)
from dw_test_data
group by rq, gngw, jjdq, wp, jjrlx, jjrxb, jjrnld
order by rq ,jjrnld
0.25
13939939同上
1.9100
120528
gp
select
da.month,
sum(dw.jdl) ,
sum(dw.wtdl) ,
sum(dw.t**dl) ,
sum(dw.tqwtdl) ,
sum(dw.syjdl),
sum(dw.sywtdl)
from dw_test_data dw
left join dw_test_dim_date da on dw.rq=da.day
left join dw_test_dim_region re on dw.jjdq=re.city
group by
da.month
3.91008
select
dw.rq,
dw.gngw,
dw.jjdq,
dw.wp,
dw.jjrlx,
dw.jjrxb,
dw.jjrnld,
dw.sjrlx,
dw.sjrlb,
dw.sjrnlb,
dw.kdjc,
sum(dw.jdl) ,
sum(dw.wtdl) ,
sum(dw.t**dl) ,
sum(dw.tqwtdl) ,
sum(dw.syjdl),
sum(dw.sywtdl)
from dw_test_data dw
left join dw_test_dim_date da on dw.rq=da.day
left join dw_test_dim_region re on dw.jjdq=re.city
group by
dw.rq,
dw.gngw,
dw.jjdq,
dw.wp,
dw.jjrlx,
dw.jjrxb,
dw.jjrnld,
dw.sjrlx,
dw.sjrlb,
dw.sjrnlb,
dw.kdjc
order by dw.rq ,dw.jjrnld
190100682992
select
dw.rq,
dw.gngw,
dw.jjdq,
dw.wp,
dw.jjrlx,
dw.jjrxb,
dw.jjrnld,
dw.sjrlx,
dw.sjrlb,
dw.sjrnlb,
dw.kdjc,
sum(dw.jdl) ,
sum(dw.wtdl) ,
sum(dw.t**dl) ,
sum(dw.tqwtdl) ,
sum(dw.syjdl),
sum(dw.sywtdl)
from dw_test_data dw
left join dw_test_dim_date da on dw.rq=da.day
left join dw_test_dim_region re on dw.jjdq=re.city
group by
dw.rq,
dw.gngw,
dw.jjdq,
dw.wp,
dw.jjrlx,
dw.jjrxb,
dw.jjrnld,
dw.sjrlx,
dw.sjrlb,
dw.sjrnlb,
dw.kdjc
order by dw.rq ,dw.jjrnld
limit 200 2
100200
效能測試報告
1 專案介紹.3 1.1 測試目的.3 1.2 縮略語和術語說明.3 1.3 測試環境配置.3 2 效能測試工具.4 3 效能測試方案.4 3.1 系統壓力測試.4 3.1.1 系統壓力測試操作步驟.4 3.1.2 測試通過標準.4 4 效能測試資料分析.5 4.1 系統壓力測試報告.5 4.1.1...
效能測試報告
於感謝分享!1 計畫概述 目的 找出系統潛在的效能缺陷 目標 從安全 可靠 穩定的角度出發,找出效能缺陷,並且找出最佳承受併發使用者數,以及併發使用者數下時間執行的負載情況,如要併發100個使用者,如何對系統分析和調優 3 術語解釋 名詞解釋 4 系統簡介 對乙個什麼系統的測試 5 測試環境 測試範...
MQTT SERVER 效能測試報告
硬體環境 記憶體4g cpu4核 server及埠 apollo埠 61619 mosquitto 埠 1884 activemq埠 1883 emqtt 埠1885 測試方法 併發測試 192.168.6.156 上用 emqttd benchmark 測試 192.168.6.157 上的各mq...