首頁技術(shù)文章正文

Hadoop有幾種運行模式?各種模式都有哪些特性?

更新時間:2021-04-02 來源:黑馬程序員 瀏覽量:

1577370495235_學(xué)IT就到黑馬程序員.gif


Hadoop有三種運行模式:獨立(本地)運行模式,偽分布式模式,和完全分布式模式。

(1)獨立(本地)運行模式:安裝簡單,幾乎不用做任何配置,但僅限于調(diào)試用途。無需任何守護(hù)進(jìn)程,所有的程序都運行在同一個JVM上執(zhí)行。在獨立模式下調(diào)試MR程序非常高效方便。所以一般該模式主要是在學(xué)習(xí)或者開發(fā)階段調(diào)試使用 。

(2)偽分布式模式:在單節(jié)點上同時啟動namenode、datanode、jobtracker、tasktracker、secondarynamenode等5個進(jìn)程,模擬分布式運行的各個節(jié)點。Hadoop守護(hù)進(jìn)程運行在本地機(jī)器上,模擬一個小規(guī)模的集群,換句話說,可以配置一臺機(jī)器的Hadoop集群,偽分布式是完全分布式的一個特例。

(3)完全分布式模式:正常的Hadoop集群,由多個各司其職的節(jié)點構(gòu)成。Hadoop守護(hù)進(jìn)程運行在一個集群上。

注意:開發(fā)環(huán)境,使用獨立模式;測試環(huán)境,可以使用偽分布式模式;線上生產(chǎn)環(huán)境,使用完全分布式模式。






猜你喜歡:

Hadoop生態(tài)體系有哪些子系統(tǒng)?

Zookeeper集群中的三種角色簡單介紹

Hadoop實現(xiàn)join的幾種方法【大數(shù)據(jù)開發(fā)面試】    

Hadoop虛擬機(jī)怎樣遠(yuǎn)程登錄和開啟SSH免密登錄功能?

黑馬程序員大數(shù)據(jù)培訓(xùn)

分享到:
在線咨詢 我要報名
和我們在線交談!