安裝Hadoop前,首先請確保您已經安裝了Java JDK。以下是在Ubuntu上安裝Hadoop的步驟:
下載Hadoop:在Hadoop官方網站上下載最新的穩定版本的Hadoop。下載地址:https://hadoop.apache.org/releases.html
解壓縮Hadoop壓縮包:使用以下命令解壓縮下載的Hadoop壓縮包:
tar -xzvf hadoop-X.X.X.tar.gz
(X.X.X是Hadoop的版本號)
nano ~/.bashrc
在文件的末尾添加以下內容:
export HADOOP_HOME=/path/to/hadoop-X.X.X
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
(將“/path/to/hadoop-X.X.X”替換為您的Hadoop解壓縮路徑)
保存并關閉文件,然后運行以下命令使更改生效:
source ~/.bashrc
cd /path/to/hadoop-X.X.X/conf
nano hadoop-env.sh
找到以下行并設置JAVA_HOME:
export JAVA_HOME=/path/to/java
(將“/path/to/java”替換為您的Java安裝路徑)
保存并關閉文件。
配置Hadoop集群:Hadoop的配置文件位于conf目錄中。在這個目錄中,您可以根據需要進行配置,包括core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml等。根據您的需求進行配置,并保存這些文件。
格式化Hadoop文件系統:在終端中,運行以下命令以格式化Hadoop文件系統:
hdfs namenode -format
start-all.sh
以上是在Ubuntu上安裝Hadoop的基本步驟。根據您的需求,您可能還需要進行其他配置,例如設置Hadoop的權限或配置更復雜的Hadoop集群。