实验一 Hadoop 环境安装和使用
实验目的:
1、掌握 linux 系统的安装调试,熟悉 linux 的用户管理和软件安装相
关命令,熟悉 linux 下软件的使用;
2、掌握 Hadoop 的安装调试和使用;
实验内容:
3、linux 系统安装,按照 Hadoop 环境要求,安装相应版本的 linux
系统。
4、配置 Hadoop 的相关系统环境。
5、安装配置 Hadoop 软件。
实验步骤:
1、操作系统安装,Hadoop 的运行环境为 64 位 linux 系统,本过程
通过在虚拟机上安装 ubuntu 64 位系统来模拟。
2、在安装的虚拟机 Ubuntu 系统中增加一个名为 hadoop 的用户,
使用此用户来安装运行 Hadoop。
3、更新 apt 源。
用 hadoop 用户登录后,我们先运行 apt-get update 对软件源进行更新,思
考为何要更新。(因为要安装一些软件的话,没有更新是无法进行安装的)
4、安装 SSH、配置 SSH 无密码登陆。
集群、单节点模式都需要用到 SSH 登陆(类似于远程登陆,你可以登录
某台 Linux 主机,并且在上面运行命令),Ubuntu 默认已安装了 SSH client,
此外还需要安装 SSH server。
使用命令登陆本机:
退出刚才的 ssh,然后利用 ssh-keygen 生成密钥,并将密钥加入到授权中:
(最后结果是不输入密码也可以直接登陆,如图)
5、安装 Java 环境。
配置 JAVA_HOME 环境变量并使其生效
6、安装 Hadoop 2。
下载好 hadoop 文件:
把 hadoop 安装在/usr/local,然后查看其版本验证是否安装成功
7、Hadoop 单机配置(非分布式)。
Hadoop 默认模式为非分布式模式,无需进行其他配置即可运行。非分布式即
单 Java 进程,方便进行调试。