logo资料库

大数据实验报告.doc

第1页 / 共66页
第2页 / 共66页
第3页 / 共66页
第4页 / 共66页
第5页 / 共66页
第6页 / 共66页
第7页 / 共66页
第8页 / 共66页
资料共66页,剩余部分请下载后查看
实验一 Hadoop 环境安装和使用 实验目的: 1、掌握 linux 系统的安装调试,熟悉 linux 的用户管理和软件安装相 关命令,熟悉 linux 下软件的使用; 2、掌握 Hadoop 的安装调试和使用; 实验内容: 3、linux 系统安装,按照 Hadoop 环境要求,安装相应版本的 linux 系统。 4、配置 Hadoop 的相关系统环境。 5、安装配置 Hadoop 软件。 实验步骤: 1、操作系统安装,Hadoop 的运行环境为 64 位 linux 系统,本过程 通过在虚拟机上安装 ubuntu 64 位系统来模拟。
2、在安装的虚拟机 Ubuntu 系统中增加一个名为 hadoop 的用户, 使用此用户来安装运行 Hadoop。 3、更新 apt 源。
用 hadoop 用户登录后,我们先运行 apt-get update 对软件源进行更新,思 考为何要更新。(因为要安装一些软件的话,没有更新是无法进行安装的) 4、安装 SSH、配置 SSH 无密码登陆。 集群、单节点模式都需要用到 SSH 登陆(类似于远程登陆,你可以登录 某台 Linux 主机,并且在上面运行命令),Ubuntu 默认已安装了 SSH client, 此外还需要安装 SSH server。
使用命令登陆本机: 退出刚才的 ssh,然后利用 ssh-keygen 生成密钥,并将密钥加入到授权中: (最后结果是不输入密码也可以直接登陆,如图)
5、安装 Java 环境。 配置 JAVA_HOME 环境变量并使其生效
6、安装 Hadoop 2。 下载好 hadoop 文件: 把 hadoop 安装在/usr/local,然后查看其版本验证是否安装成功 7、Hadoop 单机配置(非分布式)。 Hadoop 默认模式为非分布式模式,无需进行其他配置即可运行。非分布式即 单 Java 进程,方便进行调试。
分享到:
收藏