大資料中hadoop和spark的重要性不必多言,常用埠號必須得記得死死的。
hadoop2.x:
訪問hdfs埠 50070
訪問mr執**況埠 8088
訪問歷史伺服器 19888
客戶端訪問集群埠 9000
hadoop3.x:
訪問hdfs埠 9870
訪問mr執**況埠 8088
訪問歷史伺服器 19888
客戶端訪問集群埠 8020
spark:
檢視當前spark-shell 運**況埠號 4040
spark master內部通訊服務埠號 7077
spark standalone模式web埠號 8080
spark歷史伺服器端口號 18080
Hadoop 和 Spark 的異同
談到大資料,相信大家對hadoop和apache spark這兩個名字並不陌生。但我們往往對它們的理解只是提留在字面上,並沒有對它們進行深入的思考,下面不妨跟我一塊看下它們究竟有什麼異同。首先,hadoop和apache spark兩者都是大資料框架,但是各自存在的目的不盡相同。hadoop實質上更...
hadoop和spark的異同
解決問題的層面不一樣 首先,hadoop和apache spark兩者都是大資料框架,但是各自存在的目的不盡相同。hadoop實質上更多是乙個分布式資料基礎設施 它將巨大的資料集分派到乙個由普通計算機組成的集群中的多個節點進行儲存,意味著您不需要購買和維護昂貴的伺服器硬體。同時,hadoop還會索引...
Hadoop和Spark的異同
談到大資料,相信大家對hadoop和apache spark這兩個名字並不陌生。但我們往往對它們的理解只是提留在字面上,並沒有對它們進行深入的思考,下面不妨跟我一塊看下它們究竟有什麼異同。解決問題的層面不一樣 首先,hadoop和apache spark兩者都是大資料框架,但是各自存在的目的不盡相同...