首頁技術(shù)文章正文

Hadoop三種運行模式的應(yīng)用場景

更新時間:2021-06-25 來源:黑馬程序員 瀏覽量:

1577370495235_學(xué)IT就到黑馬程序員.gif

Hadoop有三種運行模式:獨立(本地)運行模式,偽分布式模式,和完全分布式模式。

(1)獨立(本地)運行模式:安裝簡單,幾乎不用做任何配置,但僅限于調(diào)試用途。無需任何守護進程,所有的程序都運行在同一個JVM上執(zhí)行。在獨立模式下調(diào)試MR程序非常高效方便。所以一般該模式主要是在學(xué)習(xí)或者開發(fā)階段調(diào)試使用 。

(2)偽分布式模式:在單節(jié)點上同時啟動namenode、datanode、jobtracker、tasktracker、secondarynamenode等5個進程,模擬分布式運行的各個節(jié)點。Hadoop守護進程運行在本地機器上,模擬一個小規(guī)模的集群,換句話說,可以配置一臺機器的Hadoop集群,偽分布式是完全分布式的一個特例。

(3)完全分布式模式:正常的Hadoop集群,由多個各司其職的節(jié)點構(gòu)成。Hadoop守護進程運行在一個集群上。

注意:開發(fā)環(huán)境,使用獨立模式;測試環(huán)境,可以使用偽分布式模式;線上生產(chǎn)環(huán)境,使用完全分布式模式。








猜你喜歡:

Hadoop中的Sequence File文件是什么?【大數(shù)據(jù)面試題】

Hadoop格式化文件需要執(zhí)行哪些操作?[

Hadoop是什么,Hadoop的主要發(fā)展過程

黑馬程序員python+大數(shù)據(jù)培訓(xùn)課程

分享到:
在線咨詢 我要報名
和我們在線交談!