天天看点

CentOS 7下配置hadoop 2.8 分布式集群一、基础环境描述二、主要步骤三、配置及安装hadoop 2.8

Hadoop是一个由Apache基金会所开发的分布式系统基础架构,实现分布式文件系统HDFS,用于存储大数据集,以及可以以流的形式访问(streaming access)文件系统中的数据。Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,则MapReduce为海量的数据提供了计算。本文描述了在CentOS 7下,基于三个节点安装hadoop 2.8,供大家参考。

配置Java运行环境
配置hosts文件
配置hadoop运行账户及数据存放目录
配置ssh等效连接
配置用户环境变量
下载解压hadoop安装包
配置hadoop相关配置文件
格式化namenode
启动hadoop
验证hadoop

查看集群摘要信息

CentOS 7下配置hadoop 2.8 分布式集群一、基础环境描述二、主要步骤三、配置及安装hadoop 2.8

查看集群信息 

CentOS 7下配置hadoop 2.8 分布式集群一、基础环境描述二、主要步骤三、配置及安装hadoop 2.8