hadoop2.5.1偽分布式怎么部署

小編給大家分享一下hadoop2.5.1偽分布式怎么部署，相信大部分人都還不怎么了解，因此分享這篇文章給大家參考一下，希望大家閱讀完這篇文章后大有收獲，下面讓我們一起去了解一下吧！

環境：Ubuntu 12.10  jdk 1.7

JDK和SSH下載安裝不用再細說了，網上一大堆資料。

配置免登錄命令：

  $ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
  $ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

前面已經將源碼編譯好了，將/data/hadoop-2.5.1-src/hadoop-dist/hadoop-2.5.1.tar.gz拷貝到/data目錄下

解壓tar -xvf hadoop-2.5.1.tar.gz

配置etc/hadoop/core-site.xml:

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>

配置etc/hadoop/hdfs-site.xml:

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
</configuration>

配置YARN的配置文件etc/hadoop/mapred-site.xml:

<configuration>
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
</configuration>

配置etc/hadoop/yarn-site.xml:

<configuration>
    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>
</configuration>

啟動/停止namenode和datanode命令

cd /data/hadoop-2.5.1

sbin/start-dfs.sh

sbin/stop-dfs.sh

啟動/停止YARN命令

sbin/start-yarn.sh

sbin/stop-yarn.sh

驗證命令：

bin/hdfs namenode -format

bin/hdfs dfs -put etc/hadoop input

 namenode地址:http://localhost:50070/

ResourceManager地址:http://localhost:8088/

以上是“hadoop2.5.1偽分布式怎么部署”這篇文章的所有內容，感謝各位的閱讀！相信大家都有了一定的了解，希望分享的內容對大家有所幫助，如果還想學習更多知識，歡迎關注億速云行業資訊頻道！