1 / 10
文档名称:

Hadoop完全分布式搭建.doc

格式:doc   大小:600KB   页数:10页
下载后只包含 1 个 DOC 格式的文档,没有任何的图纸或源代码,查看文件列表

如果您已付费下载过本站文档,您可以点这里二次下载

分享

预览

Hadoop完全分布式搭建.doc

上传人:cxmckate6 2022/2/2 文件大小:600 KB

下载得到文件列表

Hadoop完全分布式搭建.doc

相关文档

文档介绍

文档介绍:word
word
1 / 10
word
完全分布式环境安装(完整亲测)
一、安装linux系统
Hadoop需要至少3个节点才能算是完全分布式环境,需要在虚拟机中安装3个 linux操作系统,比拟快速的方式是通过安装一个操作word
word
1 / 10
word
完全分布式环境安装(完整亲测)
一、安装linux系统
Hadoop需要至少3个节点才能算是完全分布式环境,需要在虚拟机中安装3个 linux操作系统,比拟快速的方式是通过安装一个操作系统,再复制2个操作系统。
这一步也可以在最后做,完全配置好一台linux系统环境之后再克隆,会节省一些时间,看个人的****惯。
过程如下:
1、使用VMware的克隆功能
2、选择创建完成克隆
word
word
2 / 10
word
3、输入主机名称,完成克隆操作。
主机列表如下:
主机名
IP地址
用途
master
namenode、secondorynamenode、jobtracker任务
node1
slave结点
node2
slave结点(冗余节点)
二、配置每台机器IP地址
最好配置每台机器的ip地址,否如此每次开机地址都可能发生变化。
通过ifconfig命令查看当前IP地址〔 所以显示eno16777736 其实和eth0是一样的〕
word
word
3 / 10
word
修改IP地址
登陆图形界面修改固定IP
三、配置hosts文件
三台机器都配置一样的hosts
同时需要把主机名改掉
四、增加Hadoop允许账号
[rootlocalhost ~]# groupadd hadoop //添加组
[rootlocalhost ~]# useradd -s /bin/bash grid -g hadoop -G root
//添加用户 属于hadoop和root组
[rootlocalhost ~]# passwd grid //添加密码
更改用户 grid 的密码 。
新的 密码:
无效的密码: 密码少于 8 个字符
重新输入新的 密码:
passwd:所有的身份验证令牌已经成功更新。
word
word
4 / 10
word
[rootlocalhost ~]# su - grid //切换到grid用户
[gridlocalhost ~]$
五、配置ssh免密码连入
1、产生公共秘钥
2、复制公共秘钥 三台机器都执行
3、需要把maste的公钥,写到node1和node2 实现免密码登陆
[gridnode2 .ssh]$ scp gridmaster:~/.ssh/ ./
//把master的公钥复制到本地
The authenticity of host 'master ()' can't be established.
ECDSA key fingerprint is 38:f8:18:b1:3c:e6:c6:a7:52:80:dc:97:3f:ba:de:35.
Ar