云计算实验Hadoop安装与配置

实验一：Hadoop安装与配置

实验目的：

熟悉Hadoop的安装与配置方法，能够检查hadoop的运行状态与日志内容，运行简单的wordcount实例。设置eclipse开发环境。

实验要求：

独立完成实验过程，记录实验的过程、结果以及遇到的问题及解决方法（截图等），以便完成实验检查工作。

实验过程：

1.在windows系统建立root账号，分配管理员权限，切换到root账号

2.打开virtualbox虚拟机：master与slave

3.修改windows的hosts文件(C:\WINDOWS\system32\drivers\etc)，并进行连通性测

试。

4.分别添加hadoop配置文件

5.启动Hadoop

6.查看hadoop的日志

7.检查WEB管理界面

8.运行wordcount实例（操作HDFS文件系统，建立文件夹，添加文件）

9.设置eclipse开发环境，在其中运行wordcount实例

扩展练习：

修改master与slave的ip地址。将master地址设为192.168.56.X，其中X为桌号，slave地址设为192.168.56.X+1

参考资料：

1.Hadoop集群_第5期_Hadoop安装配置

2.Hadoop集群_第6期_WordCount运行详解

3.Hadoop集群_第7期_Eclipse开发环境设置

配置说明：

1利用xshell登录hadoop.master，利用xftp进行文件传输

2 将hosts文件拷贝到/etc/hosts

3 将core-site.xml，hdfs-site.xml，mapred-site.xml，masters和slaves拷贝到/usr/hadoop/conf

4 利用xshell登录slave.master，利用xftp进行上述文件传输

1