Hadoop环境搭建——伪分布式环境搭建

本文大部分借鉴了http://www.linuxidc.com/Linux/2012-03/56691.htm 中的安装过程，在此向原作者表示感谢，同时本文的原创性是更改了Hadoop文件配置部分，以及对按装过程中遇到的问题做了说明

工具：

jdk-6u38-linux-i586.bin

hadoop-1.1.2.tar.gz

Ubuntu-12.04.1-desktop-i386.iso

安装

1、安装Ubuntu 10.10

参见：http://www.linuxidc.com/Linux/2010-10/29472.htm

2、安装jdk1.6.0_38

在usr下面新建一个文件夹Java,然后将jdk复制过来

sudo mkdir /usr/Java

sudo cp jdk的路径 /usr/Java

进入到Java目录下，改变文件权限为可执行

cd /usr/Java

sudo chmod u+x jdk-6u38-linux-i586.bin

执行安装

sudo ./ jdk-6u38-linux-i586.bin

3、安装hadoop0.21.0

将hadoop-1.1.2.tar.gz复制到usr下面的local文件夹内

sudo cp hadoop的路径 /usr/local

进入到local目录下，解压hadoop-1.1.2.tar.gz

cd /usr/local

sudo tar -xzf hadoop-1.1.2.tar.gz

为了方便管理，将解压后的文件夹名改为hadoop

sudo mv hadoop-1.1.2.tar.gz

4、创建一个名为hadoop的用户和用户组

创建一个名为hadoop的用户组

sudo addgroup hadoop

创建一个名为hadoop的用户，归到hadoop用户组下

sudo adduser --ingroup hadoop hadoop

用gedit打开etc下的sudoers文件

sudo gedit /etc/sudoers

在 root  ALL=(ALL)  ALL 下面添加如下一行，然后保存关闭gedit

hadoop  ALL=(ALL)  ALL

5、配置相关文件

用gedit打开etc下的profile文件

sudo gedit /etc/profile

在文件最后加入如下几行

export CLASSPATH=.:/usr/Java/jdk1.6.0_38/lib:/usr/Java/jdk1.6.0_38/jre/lib:$CLASSPATH

export PATH=.:/usr/Java/jdk1.6.0_38/bin:/usr/Java/jdk1.6.0_38/jre/bin:/usr/local/hadoop/bin:$PATH

保存后关闭gedit，并重启机器

sudo reboot

重启后用hadoop用户登录，验证配置是否成功

java -version

PS：我刚开始装jdk时，一切都妥妥的装好以后，发现这个命令一直无法运行成功，经过多方查证，发现时jdk版本有问题，前面装的jdk是从Unix社区下载的jdk-6u3-dlj-linux-i586.bin，安装好后，会有许多没有加压完全的后缀名为.pack的文件，这些文件需要解压成后缀名为.jar的文件才可以，可以用/usr/Java/jdk1.6.0_38/bin下的Unpack200来做，命令类似与：

sudo ./unpack200 tools.pack tools.jar

如果选用jdk-6u38-linux-i586.bin这个jdk则不会出现上述问题