基于redhat 7.3的hadoop集群安装
hadoop-2.7.7
jdk1.8.0_121

创建用户hadoop
创建一个用户，名为hadoop。
vim /etc/sudoers
在 root ALL=(ALL) ALL下面加上
hadoop ALL=(ALL) ALL 使。Hadoop用户拥有root权限

在相关网站上下载Hadoop与jdk
切换到hadoop用户
用ifconfig查看机器的名字

Sudo vi /etc/sysconfig/network-scripts/ifcfg-ens33（ens33为机器名）
输入登入密码
修改网络配置文件，将BOOTPROTO值修改为”static”
在最后面加上以下网络配置
IPADDR=192.168.60.130 IP地址，130为自己设定的，前面的和网关前面相同
GATEWAY=192.168.60.2 网关
NETMASK=255.255.255.0
DNS1=101.226.4.6

重新启动网络服务 service network restart

ping www.baidu.com 在虚拟机联网的情况下，测试网络配置是否成功

sudo Vi /etc/hostname 修改主机名称为master

sudo vim /etc/hosts
向这个hosts文件追加三行 ，格式为 Ip地址 主机名 ，方便linux 系统之间进行通信
192.168.60.130 master
192.168.60.131 slave1
192.168.60.132 slave2

完成之后重启。输入reboot

解压jdk和hadoop
cd /usr/soft/
sudo tar -zxvf hadoop-2.7.7.tar.gz

sudo tar -zxvf jdk-8u121-linux-x64.gz

cd /usr/soft/hadoop-2.7.7/etc/hadoop/
sudo vi hadoop-env.sh

按如图下修改配置
#The java implementation to use
export JAVA_HOME=/usr/soft/jdk1.8.0_121

sudo vi yarn-env.sh

#export JAVA_HOME=/home/y/libexec/jdk1.6.0/
if [ “$JAVA_HOME” != “” ]; then
#echo “run java in $JAVA_HOME”
JAVA_HOME=/usr/soft/jdk1.8.0_121

sudo vi slaves

删除locallhsot
填入：slave1
slave2
sudo vi core-site.xml

fs.defaultFS
hdfs://master:9000


hadoop.tmp.dir
file:/usr/soft/ hadoop-2.7.7/temp/

sudo vi hdfs-site.xml

dfs.namenode.secondary.http-address master:50090 dfs.namenode.name.dir file:/usr/soft/hadoop-2.7.7/dfs/name dfs.datanode.data.dir file:/usr/soft/hadoop-2.7.7/dfs/data dfs.replication 2 dfs.webhdfs.enabled true  cp mapred-site.xml.template mapred-site.xml

sudo vi mapred-site.xml

mapreduce.framework.name yarn mapreduce.jobhistory.address master:10020 mapreduce.jobhistory.webapp.address master:19888  sudo vi yarn-site.xml yarn.resourcemanager.hostname master yarn.nodemanager.aux-services mapreduce_shuffle  在master节点上创建以下文件夹

sudo mkdir -p dfs/data
sudo mkdir -p dfs/name
sudo mkdir temp

sudo cd /root
sudo vi ~/.bashrc

export JAVA_HOME=/usr/soft/jdk1.8.0_121
export PATH=$PATH:$JAVA_HOME/bin
export HADOOP_HOME=/usr/soft/hadoop-2.7.7
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

source ~/.bashrc

进行克隆

将克隆后的节点修改网络配置
sudo vi /etc/sysconfig/network-scripts/ifcfg-ens33
IPADDR=192.168.60.131(slave1)
IPADDR=192.168.60.132(slave2)
service network restart 重启网络服务

将克隆后的节点修改名称 sudo Vi /etc/hostname
分别修改为slave1和slave2

重启节点slave1与slave2 reboot
配置免密登入
ssh localhost （三个节点都要输入

cd ~/.ssh/ （三个节点都要输入
ssh-keygen -t rsa （一路回车（三个节点都要输入，

cat id_rsa.pub >> authorized_keys （只需要在一个节点）

chmod 600 authorized_keys

在另外两个节点上输入cat id_rsa.pub 复制密匙到这个节点的authorized_keys

在节点上输入 vi authorized_keys

将此节点的authorized_keys复制到其他的节点上
scp authorized_keys hadoop@slave1:~/.ssh/
scp authorized_keys hadoop@slave2:~/.ssh/

永久关闭防火墙命令。重启后，防火墙不会自动启动。 systemctl disable firewalld
另外，下面的只作为拓展
查看防火墙状态。systemctl status firewalld
临时关闭防火墙命令。重启电脑后，防火墙自动起来。systemctl stop firewalld
打开防火墙命令。systemctl enable firewalld

hdfs namenode -format

start-all.sh

Jps