1 / 40
文档名称:

cloudera 安装部署手册.doc

格式:doc   大小:1,585KB   页数:40页
下载后只包含 1 个 DOC 格式的文档,没有任何的图纸或源代码,查看文件列表

如果您已付费下载过本站文档,您可以点这里二次下载

分享

预览

cloudera 安装部署手册.doc

上传人:changjinlai 2020/3/16 文件大小:1.55 MB

下载得到文件列表

cloudera 安装部署手册.doc

文档介绍

文档介绍:clouderaCDH安装功能名称:业务名称:编写人:编写日期:2014-7-28确认人:确认日期:修订记录日期版本作者/修改者描述审核人目录1. 导言 . 说明 . 集群节点 . 硬件 . 软件版本 52. 准备工作 . 操作系统 . 磁盘 . 是否需要raid . 磁盘划分 . 磁盘裸设备的挂载 . 关闭防火墙 . 修改主机名并配置Hosts . 修改主机名 . 设置每台主机的hosts . ssh免登陆配置 . 创建公钥和密钥 . 配置与其他机器的免密码登陆 . 同步集群时间ntp . 配置ntpserver集群时钟 . ntp客户端配置 . 测试 . 上传安装包以及搭建yum源 . 安装cloudera需要的文件如下安装包 . 上传yum源需要的文件到/var/.3. 启动httpd服务 . 测试HTTPD . 编辑yum源配置文件 . 安装createrepo . 创建源索引 153. cm安装 . 上传cm安装启动程序 . 164. cdh安装 . 登陆CM . 指定主机 . 群集安装 . 安装parcel . 配置CDH--- . 配置parcel . 选择parcel和cm等 . 安装CMJDK和分发数据包等 . 分配parcel . 检查各个主机 . 选择需要安装的服务 . 分配角色并安装 305. 验证和使用 . zookeeper . hbase . hdfs . 使用shell验证hbase安装 34导言说明本指导书以潍坊交警hadoop集群为例,指导安装CDH集群节点见hadoop服务器角色清单硬件共14台“华为RH2288-HV2XeonE5-2620,内存容量:192G,4块2TSATA硬盘”,hadoop的hdfs本身具有冗余和并发机制,namenode为了保证数据安全,需要安装raid。磁盘划分磁盘划分datanode要求盘符的划分所有节点要相同,之后的hadoop所有相关安装路径等也需要相同。Namenode划分如下:共有2块raid盘Datanode如下:4块物理盘磁盘裸设备的挂载a查看裸设备:fdisk–lb进入分区fdisk/dev/,使挂载重启后有效vi/etc/fstab添加/dev/sda4/home/data1ext4defaults12保存,reboot机器确认挂载成功f卸载umount/dev/sda4关闭防火墙集群所有机器执行:[******@node41~]#serviceiptablesstopiptables:Flushingfirewallrules:[OK]iptables:EPT:filter[OK]iptables:Unloadingmodules:[OK][******@node41~]#chkconfigiptablesoff每个机器都需要关闭防火墙修改主机名并配置Hosts修改主机名每台机器设置不同的主机名设置每台主机的hosts在每个机器设置Hostsvi/etc/,重启机器查看主机名是否变化[******@node29~]#ssh免登陆配置创建公钥和密钥[******@node29~]#ssh-keygen-trsaGeneratingpublic/privatersakey