文档介绍：clouderaCDH 安装
功能名称：
业务名称：
编写人：
编写日期：
2014-7-28
确认人：
确认日期：
修订记录
日期
版本
作者/修改者
描述
审核人
目 录
导言 6
说明 6
集群节点 6
硬件 6
软件版本 6
准备工作 6
操作系统 6
磁盘 6
是否需要raid 6
磁盘划分 6
磁盘裸设备的挂载 7
关闭防火墙 8
修改主机名并配置 Hosts 8
修改主机名 8
设置每台主机的 hosts 8
ssh 免登陆酉己置 9
创建公钥和密钥 9
配置与其他机器的免密码登陆 1 1
同步集群时间 ntp
配置ntp server 集群时钟 12
ntp客户端配置
测试
上传安装包以及搭建 yum源 16
安装cloudera 需要的文件如下安装包 1 6
上传yum源需要的文件到 /var/www/html 目录下 16
启动 httpd 服务
测试 HTTPD
编辑yum 源配置文件 .18
安装 createrepo 20
创建源索引 20
cm 安装 20
上传cm安装启动程序 20
安装 cm 的 20
cdh 安装 24
登陆 CM 24
指定主机 25
群集安装 26
安装 parcel 26
配置 CDH--- 26
配置 parcel 27
选择 parcel 和 cm 等 30
安装CM JDK和分发数据包等 32
分配 parcel 34
检查各个主机 34
选择需要安装的服务 .35
分配角色并安装
验证和使用 39
zookeeper 39
hbase 39
hdfs 40
使用shell验证hbase 安装 40
导言
说明
本指导书以潍坊交警 hadoop集群为例，指导安装 CDH
集群节点
见hadoop服务器角色清单
硬件
共 14 台“华为 RH2288-HV2 Xeon E5-2620，内存容量：192G , 4 块 2T SATA
硬盘”
软件版本
准备工作
操作系统
操作系统使用
磁盘
是否需要raid
集群datanode 不需要安装raid磁盘，hadoop 的hdfs本身具有冗余和并发机
制，namenode 为了保证数据安全，需要安装 raid。
磁盘划分
磁盘戈U分datanode 要求盘符的划分所有节点要相同，之后的 hadoop所有相关
安装路径等也需要相同。
Namenode 划分如下：共有 2块raid盘
[root^l ocal host -]# df -h
文件系统 容量
/dev/sdaS 20G
Cinpfs 95G
/dev/sdal 97M
/dev/sda2 4&LG
/dev/sdaS
/dev/sdaz 1. zr
dev/s-dbl 1F ST
已用 S8K 3ZM 19BM 151M 199M 196M
已用颉挂觑点
1豌/
1% /dev/shm
34% /boot
1% /home
2黑 /tnp
/hdf5/datal
IK /hdfs ' data2
[r oot&l ocal ho^-t 文件系箕 /dev/sdaS tmpf s
Fdev/5clal /d&v/sda? /d&v/sda6 d&v/sdbl /dev/sdcl dev/s-ddl d&v/sda?
df -h
咨呈
20g
95G
97M
4-&1G
9. 7G
LIL
_1_1_1
8 82
己■与 Z. 6G
&8IC 狡M l^SM 151M 196M L9GM 1&6M L99M
弓-用巳用盛堂载点 L6G 145& f 95g l^S /dev/shm 61m 5+K /boat 457g 15& /home
9. 0g 25& /irmp 1, 7T 15& /hdfs/daral
L, 「T L% /hdfs/data?
1* 7T 1% /hdfs-ZdataJ
1. IT 13& /hdfs/data-1
.
磁盘裸设备的挂载
a查看裸设备:
fdisk T
进入分区
fdi