您好,登錄后才能下訂單哦!
這篇文章將為大家詳細講解有關hadoop集群部署注意問題有哪些,小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。
1、namenode 或datanode 被迫升級。
1)降級namenode,缺點:需要停止服務,不確定性因素太多(降級可能會導致所有數據丟失),測試周期長且復雜;優點:只要操作一個節點
2)升級所有的datanode,缺點:需要操作集群所有機器(也可以只升級單臺機器);優點:測試簡單,風險小
很明顯,第二種方案是優選方案,測試過程如下:
1)找一臺采集服務器,上面已經部署了hadoop客戶端,啟動datanode,成功,日志信息顯示版本為:203.1
2)刪除build目錄,再次啟動datanode,失敗
3)恢復build目錄,再次啟動datanode,成功
4)將build目錄拷貝到出錯的datanode上,修改hdfs-site.xml配置,將data目錄修改為新建目錄,啟動datanode,成功
5)將data目錄修改為最原始的配置,啟動datanode,成功
第二種方案測試成功,在namenode上運行fsck命令,正常輸出。
關于“hadoop集群部署注意問題有哪些”這篇文章就分享到這里了,希望以上內容可以對大家有一定的幫助,使各位可以學到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。