Hadoop和Spark常用埠號

2021-10-09 17:28:14 字數 440 閱讀 6915

大資料中hadoop和spark的重要性不必多言,常用埠號必須得記得死死的。

hadoop2.x:

訪問hdfs埠      50070

訪問mr執**況埠   8088

訪問歷史伺服器     19888

客戶端訪問集群埠    9000

hadoop3.x:

訪問hdfs埠      9870

訪問mr執**況埠   8088

訪問歷史伺服器     19888

客戶端訪問集群埠    8020

spark:

檢視當前spark-shell 運**況埠號 4040

spark master內部通訊服務埠號  7077

spark standalone模式web埠號  8080

spark歷史伺服器端口號      18080

Hadoop 和 Spark 的異同

談到大資料,相信大家對hadoop和apache spark這兩個名字並不陌生。但我們往往對它們的理解只是提留在字面上,並沒有對它們進行深入的思考,下面不妨跟我一塊看下它們究竟有什麼異同。首先,hadoop和apache spark兩者都是大資料框架,但是各自存在的目的不盡相同。hadoop實質上更...

hadoop和spark的異同

解決問題的層面不一樣 首先,hadoop和apache spark兩者都是大資料框架,但是各自存在的目的不盡相同。hadoop實質上更多是乙個分布式資料基礎設施 它將巨大的資料集分派到乙個由普通計算機組成的集群中的多個節點進行儲存,意味著您不需要購買和維護昂貴的伺服器硬體。同時,hadoop還會索引...

Hadoop和Spark的異同

談到大資料,相信大家對hadoop和apache spark這兩個名字並不陌生。但我們往往對它們的理解只是提留在字面上,並沒有對它們進行深入的思考,下面不妨跟我一塊看下它們究竟有什麼異同。解決問題的層面不一樣 首先,hadoop和apache spark兩者都是大資料框架,但是各自存在的目的不盡相同...