1 / 14
文档名称:

Hadoop安装部署手册.doc

格式:doc   大小:126KB   页数:14页
下载后只包含 1 个 DOC 格式的文档,没有任何的图纸或源代码,查看文件列表

如果您已付费下载过本站文档,您可以点这里二次下载

分享

预览

Hadoop安装部署手册.doc

上传人:沐雪 2022/3/13 文件大小:126 KB

下载得到文件列表

Hadoop安装部署手册.doc

文档介绍

文档介绍:1
安装环境介绍
软件环境
x64
Jdk x64
Hadoop x64
Hbase-
Zookeeper-
集群环境
集群中包括3个节点:1个Master,2和组,设置hadoop用户密码
groupadd hadoop
useradd hadoop -g Hadoop
passwd hadoop
无密码密钥对
切换到hadoop用户,生成密码对
su Hadoop
ssh-keygen -t rsa -P ''
4
生成其无密码密钥对,询问其保存路径时直接回车采用默认路径。生成的密钥对:,默认存储在"/home/hadoop/.ssh"目录下。

cat ~/.ssh/ >> ~/.ssh/authorized_keys
的权限
chmod 600 ~/.ssh/authorized_keys
用root用户登录效劳器修改SSH配置文件"/etc/ssh/sshd_config"的以下内容
su root
vi /etc/ssh/sshd_config
其中三行内容改为启用,如下所示RSAAuthentication yes
PubkeyAuthentication yes
AuthorizedKeysFile .ssh/authorized_keys
保存,退出〔esc+:wq+enter〕,重新启动SSH效劳,使设置生效
service sshd restart

相同的方式配置Slave1和Slave2的IP地址,主机名和hosts文件,新建hadoop用户和组及用户密码等等操作
机器名称
IP地址
 
 
 
 
无密码登陆配置
配置Master无密码登录所有Slave

把公钥复制所有的Slave机器上。使用下面的命令格式进行复制公钥
scp ~/.ssh/ ******@:~/
scp ~/.ssh/ ******@:~/
在Slave机器上进行配置
cat ~/ >> ~/.ssh/authorized_keys
rm –r ~/
测试Master到Slave的ssh登陆
5
ssh
配置Slave无密码登录Master
使用hadoop用户登陆Slave
把公钥复制Master机器上。使用下面的命令格式进行复制公钥
scp ~/.ssh/ ******@:~/
在Master机器上将公钥追加到authorized_keys中
cat ~/ >> ~/.ssh/authorized_keys
rm –r ~/
测试Slave到Master的ssh登陆
ssh
安装JDK
所有的机器上都要安装JDK,先在Master效劳器安装,然后其他效劳器按照步骤重复进行即可。安装JDK以及配置环境变量,需要以"root"的身份进行。
将jdk安装包jdk-7u71-linux-
解压缩文件
cd /usr/local
tar zxvf jdk-7u71-linux-
配置环境变量
vi /etc/profile
增加如下内容:
export JAVA_HOME=/usr/local/
export CLASSPATH=.:$JAVA_HOME/lib/:$JAVA_HOME/lib/
export PATH=$PATH:$JAVA_HOME/bin
source /etc/profile
保存,退出〔esc+:wq+enter〕,使配置生效
java –version
验证是否安装成功
6
rm –f jdk-7u71-