linux下如何搭建hadoop環境

這篇文章主要介紹“linux下如何搭建hadoop環境”的相關知識，小編通過實際案例向大家展示操作過程，操作方法簡單快捷，實用性強，希望這篇“linux下如何搭建hadoop環境”文章能幫助大家解決問題。

1、下載hadoop包
wget http://apache.freelamp.com/hadoop/core/stable/hadoop-0.20.2.tar.gz
2、tar xvzf hadoop-0.20.2.tar.gz
3、安裝jdk，從oracle網站上直接下載jdk，地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html
4、chmod +x jdk-6u21-linux-i586.bin;./jdk-6u21-linux-i586.bin,當前目錄下出現了jdk1.6.0_21目錄
5、配置java環境變量 vi /etc/profile

復制代碼 代碼如下:

export java_home=/root/src/hadoop/jdk1.6.0_21
export classpath=$classpath:$java_home/lib:$java_home/jre/lib
export path=$path:$java_home/bin

在終端下執行 source /etc/profile 使配置生效

6、可以用以下命令查看
顯示java版本 java -vesion

復制代碼 代碼如下:

echo $java_home
which java
echo $path
echo $classpath

如果java -version沒有顯示你的jdk的版本，請檢查你的path的設置。

7、配置hadoop環境變量 vi /etc/profile

復制代碼 代碼如下:

export hadoop_install=/root/src/hadoop/hadoop-0.20.2
export path=$path:$hadoop_install/bin

source /etc/profile 使配置生效

8、測試環境
hadoop version 顯示
hadoop 0.20.2
subversion https://svn.apache.org/repos/asf/hadoop/common/branches/branch-0.20 -r 911707
compiled by chrisdo on fri feb 19 08:07:34 utc 2010

9、配置
hadoop每一個組件都使用一個xml文件配置，核心屬性在core-site.xml中，hdfs屬性在hdfs-site.xml中，mapreduce屬性在mapred-site.xml中。這些文件都在conf子目錄下。
hadoop有本地模式、偽分布模式和完全分布模式三種，默認配置為本地模式，沒有守護進程，一切都運行在單個jvm上。

關于“linux下如何搭建hadoop環境”的內容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業相關的知識，可以關注億速云行業資訊頻道，小編每天都會為大家更新不同的知識點。