首頁(yè)技術(shù)文章正文

Hadoop三種運(yùn)行模式的應(yīng)用場(chǎng)景

更新時(shí)間:2021-06-25 來源:黑馬程序員 瀏覽量:

1577370495235_學(xué)IT就到黑馬程序員.gif

Hadoop有三種運(yùn)行模式:獨(dú)立(本地)運(yùn)行模式,偽分布式模式,和完全分布式模式。

(1)獨(dú)立(本地)運(yùn)行模式:安裝簡(jiǎn)單,幾乎不用做任何配置,但僅限于調(diào)試用途。無需任何守護(hù)進(jìn)程,所有的程序都運(yùn)行在同一個(gè)JVM上執(zhí)行。在獨(dú)立模式下調(diào)試MR程序非常高效方便。所以一般該模式主要是在學(xué)習(xí)或者開發(fā)階段調(diào)試使用 。

(2)偽分布式模式:在單節(jié)點(diǎn)上同時(shí)啟動(dòng)namenode、datanode、jobtracker、tasktracker、secondarynamenode等5個(gè)進(jìn)程,模擬分布式運(yùn)行的各個(gè)節(jié)點(diǎn)。Hadoop守護(hù)進(jìn)程運(yùn)行在本地機(jī)器上,模擬一個(gè)小規(guī)模的集群,換句話說,可以配置一臺(tái)機(jī)器的Hadoop集群,偽分布式是完全分布式的一個(gè)特例。

(3)完全分布式模式:正常的Hadoop集群,由多個(gè)各司其職的節(jié)點(diǎn)構(gòu)成。Hadoop守護(hù)進(jìn)程運(yùn)行在一個(gè)集群上。

注意:開發(fā)環(huán)境,使用獨(dú)立模式;測(cè)試環(huán)境,可以使用偽分布式模式;線上生產(chǎn)環(huán)境,使用完全分布式模式。








猜你喜歡:

Hadoop中的Sequence File文件是什么?【大數(shù)據(jù)面試題】

Hadoop格式化文件需要執(zhí)行哪些操作?[

Hadoop是什么,Hadoop的主要發(fā)展過程

黑馬程序員python+大數(shù)據(jù)培訓(xùn)課程

分享到:
在線咨詢 我要報(bào)名
和我們?cè)诰€交談!