1 / 21
文档名称:

Hadoop云计算平台搭建方案2.docx

格式:docx   大小:248KB   页数:21页
下载后只包含 1 个 DOCX 格式的文档,没有任何的图纸或源代码,查看文件列表

如果您已付费下载过本站文档,您可以点这里二次下载

分享

预览

Hadoop云计算平台搭建方案2.docx

上传人:春天资料屋 2021/12/26 文件大小:248 KB

下载得到文件列表

Hadoop云计算平台搭建方案2.docx

相关文档

文档介绍

文档介绍:Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
Hadoop 云计算平台搭建方案
一、平台搭建归纳
整体思路
针对于电网企业在营销效劳领域张开的大数据解析办理, 搭建 Hadoop 云计算平台进行海量
数据储藏, 并作深层次加工、办理, 挖掘出无法简单直观即可获取的新的模式,为电力企业
的决策供应指导。平台采用 作为海量数据储藏和解析工具,将其部署在 4 个
物理计算机节点上, 搭建 Hadoop 集群,其中 1 个节点作为 master 节点,其他 3 个作为 slave
节点。为了获取更好的牢固性,平台搭建在 Linux 系统〔 〕环境
下。
软件列表
软件 描述
VMware Workstation 虚假化软件
Ubuntu
Linux 操作系统
JDK
Java 的软件开发工具包
Hadoop
开源的云计算基础框架
HBase
分布式数据储藏系统
Zookeeper
Hadoop 可靠协调系统
Sqoop
数据迁移工具
平台搭建总流程和节点信息一览表
在平台搭建前, 给出实现的总流程图和节点信息一览表,有一个全局的认识,平台搭建总流程如以以下图所示。

版本
VMware Workstation
从而对平台搭建过程和各节点信息
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
创立虚假机 master,达成 JDK 、
Hadoop 等应用的安装和配置
对虚假机 master 进行克隆,获取的虚
拟机分别作为 slave1、slave2 和 slave3
达成 Zookeeper、 HBase 等其他分布
式效劳的部署,搭建 Hadoop 集群
运行并测试 Hadoop 集群系统
各节点信息以下表所示:
机器名
IP 地址
用户名
充当角色
master
hadoop
JobTracker 、 Namenode
slave1
hadoop
TaskTracker 、 Datanode
slave2
hadoop
TaskTracker 、 Datanode
slave3
hadoop
TaskTracker 、 Datanode
二、基础平台的搭建步骤
此次大数据储藏和办理平台的搭建, 需要 4 台物理节点来部署 Hadoop 平台环境。 我们使用
虚假机软件 VMware Workstation 创立 4 台虚假机,承载平台搭建工作。别的,由于对 4 台
虚假机的配置全局部是同样的,因此利用 VMware Workstation 的克隆功能,能够减少部署
的工作量。
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
安装虚假机软件

VMware Workstation
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
第一在

4 台

PC 机器上均安装虚假化软件

VMware Workstation

,并输入相应的序列号。
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
在 master

节点上安装

Linux

系统

Ubuntu
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
在设定为 master PC 节点上第一安装 Linux 系统〔版本为 ubuntu--desktop-i386 〕,在安装过程中为提高后期安装软件的兼容性和牢固性, 在系统语言上选择英语。 创立用户名为
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
Hadoop云计算平台搭建方案2.
“hadoop 〞的一般用户, 设置一