CentOS-6.3 安装配置Hadoop 1.1.1[图]

CentOS-6.3 安装配置Hadoop 1.1.1

文档编写人：李志

时间：2013年1月20日

1、安装概述

我们使用VMWare软件安装光盘镜像文件, CentOS-6.3-i386-bin-DVD1.iso和CentOS-6.3-i386-bin-DVD2.iso。

首先安装CentOS1，安装时尽量少选择功能包，主要是要选择vsftpd、ssh服务就可以了。

VM的系统配置内存1GB，网络可以选择NAT方式。

登录后如下：

1、1三台CentOS机器的规划

192.168.65.130 # secondaryNameNode 192.168.65.136 #datanode 192.168.65.137 #datanode

由于是NAT方式，启动系统后通过ifconfig -a指令查看。

1、2下载安装文件

下载2个安装文件

JAVA环境：jdk-6u38-linux-i586.bin Hadoop环境：hadoop-1.1.1.tar.gz

2、第1台VM虚拟机安装 2.1、VM虚拟机hostname配置

[root@localhost ~]# vi /etc/sysconfig/network

HOSTNAME=centos1

[root@localhost ~]# vi /etc/hosts 192.168.65.130 centos1

建议重启一次VM计算机。

2.2、给VM虚拟机上传java安装包

选择用的版本是jdk-6u38-linux-i586.bin

上传到root账号目录，添加执行权限，并解包。

[root@centos1 ~]# chmod 777 jdk-6u38-linux-i586.bin

[root@centos1 ~]# ./jdk-6u38-linux-i586.bin

2.3、给VM虚拟机建立SSH无密码登录

生成签名文件

[root@centos1 ~]# ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa

[root@centos1 ~]# cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys [root@centos1 ~]# service iptables stop 测试本地SSH无密码登录

[root@centos1 ~]# ssh centos1

由于等会会复制2个系统副本，因此scp拷贝签名的工作不需要了。 注意：service iptables stop 每次启动要执行。

2.4、Hadoop安装

每台虚拟机都要hadoop的安装。上传文件包hadoop-1.1.1.tar.gz。 1）解压执行:

[root@centos1 ~]# tar -zvxf hadoop-1.1.1.tar.gz

2）添加环境变量配置

[root@centos1 ~]# vi /etc/profile export JAVA_HOME=/root/jdk1.6.0_38 export JRE_HOME=/root/jdk1.6.0_38/jre export HADOOP_HOME=/root/hadoop-1.1.1 export HADOOP_HOME_WARN_SUPPRESS=1

export

CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$HADOOP_HOME/lib:$CLASSPATH export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$PATH

让配置生效：[root@centos1 ~]# source /etc/profile

[root@centos1 ~]# vi ~/.bashrc export JAVA_HOME=/root/jdk1.6.0_38