您好,登錄后才能下訂單哦!
這篇文章主要介紹了啟動hadoop時的提示信息是什么意思,具有一定借鑒價值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。
#啟動hadoop分布式系統(在namenode上運行) start-dfs.sh #輸入信息如下:
1。下面這句說明了當前這個命令的功能:啟動namenode
Starting namenodes on [namenode.hadoop.ymxx]
2。namenode反饋啟動信息,并告訴啟動namenode的日志文件存放在哪里
out改成log即是對應的日志文件,冒號 : 前面是目標節點(IP或者機器名),冒號 : 后面是目標節點的反饋信息
namenode.hadoop.ymxx: starting namenode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-namenode-namenode.hadoop.ymxx.out
3。datanode反饋啟動信息,同樣告訴啟動datanode的日志存放在datanode節點上的哪個目錄下(我這里配置了四個datanode節點)
datanode4nodemanager.hadoop.ymxx: starting datanode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-datanode-datanode4nodemanager.hadoop.ymxx.out datanodenodemanager.hadoop.ymxx: starting datanode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-datanode-datanodenodemanager.hadoop.ymxx.out datanode2nodemanager.hadoop.ymxx: starting datanode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-datanode-datanode2nodemanager.hadoop.ymxx.out datanode3nodemanager.hadoop.ymxx: starting datanode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-datanode-datanode3nodemanager.hadoop.ymxx.out
4。啟動secondary namenode
Starting secondary namenodes [secondarynamenode.hadoop.ymxx]
5。seconary namenode反饋啟動信息,并告知日志信息
secondarynamenode.hadoop.ymxx: starting secondarynamenode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-secondarynamenode-secondarynamenode.hadoop.ymxx.out
注:
1。信息里的日志目錄是目標節點上的目錄,而不是namenode上的目錄
2。可以通過jps命令到目標機器上查看,對應的進程有無啟動(通常從啟動時控制臺打印的信息是看不出來有沒有啟動成功的,必須通過jps去查看有無相關進程)
3。如果發現沒有啟動,應該立即查看目標節點上的日志文件,分析啟動失敗的原因
4。這里說明下,網上很多搭建hadoop分布式計算平臺的例子都是將NameNode和ResoureManger放在同一臺機器上的,所以搭建好了之后,可以在同一臺機器上運行start-dfs.sh和start-yarn.sh來啟動整個分布式系統,這個做法給人一個錯覺仿佛start-dfs.sh,start-yarn.sh都在NameNode上執行了就行了,事實上這是錯誤的理解方式,start-dfs.sh應該在NameNode所在的機器上執行,而start-yarn.sh應該在ResourceManager所在的機器上執行,這個很重要。我被這個錯覺害的很慘,都怪自己沒有好好的看官方文檔,其實官方文檔里說的很清楚:
#翻譯下就是:使用下面的命令啟動yarn,在被指定為資源管理器的機器上使用yarn這個用戶運行 #唉,不看文檔,盲目跟風活受罪啊 Start the YARN with the following command, run on the designated ResourceManager as yarn: [yarn]$ $HADOOP_YARN_HOME/sbin/yarn-daemon.sh --config $HADOOP_CONF_DIR start resourcemanager
感謝你能夠認真閱讀完這篇文章,希望小編分享的“啟動hadoop時的提示信息是什么意思”這篇文章對大家有幫助,同時也希望大家多多支持億速云,關注億速云行業資訊頻道,更多相關知識等著你來學習!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。