hadoop2.7.2安装指导.docx

hadoop2.7.2安装指导 由于hadoop安装方式有三种，并且三种安装方式都可以在前面的基础上继续配置，分别是： 本地模式 伪分布 分布式 ############################################### 1.准备 安装jdk1.7参考测试： Java -version 没有安装jdk的，下载安装jdk。 jdk.png (12.65 KB, 下载次数: 2)  HYPERLINK /forum.php?mod=attachmentaid=MTQ0MjZ8OGEyMzYyYjJ8MTQ2NTY5ODgxNnwwfDEyNzk4nothumb=yes \t _blank 下载附件 ? HYPERLINK javascript:; 保存到相册 2015-4-27 16:40 上传 安装ssh 检查是否安装了ssh: rpm –qa | grep ssh 没有安装的，则安装ssh： yum install ssh 免密码登录设置： ssh-keygen -t dsa -P -f ~/.ssh/id_dsa cat ~/.ssh/id_dsa.pub ~/.ssh/authorized_keys 最后达到无密码登录 设置hostname 在/etc/sysconfig/network修改HOSTNAME并保存，以永久修改主机名。文件内容如下所示； NETWORKING=yes HOSTNAME=hadoop180 重启network服务使修改生效。 service network restart 注：使用hostname查看主机名，返回的依然是旧的，需要重新登陆。 首先去Apache下载最新的安装包吧  HYPERLINK / / Download hadoop Release 2.安装 解压安装文件： Tar –zxvf hadoop-2.7.2.tar.gz 进入配置文件目录 我这里是/home/crh/hadoop-2.7.2/etc/hadoop 修改配置文件：etc/hadoop/hadoop-env.sh 修改了JAVA_HOME export JAVA_HOME=/usr/java/jdk1.7.0_79 配置环境变量 /etc/profile 增加hadoop配置 将下面添加到变量PATH中 PATH=/home/crh/hadoop-2.7.2/bin:/home/crh/hadoop-2.7.2/sbin:$PATH ######################################################## 3.本地模式验证[可忽略] 所谓的本地模式：在运行程序的时候，比如wordcount是在本地磁盘运行的 上面已经配置完毕，我们对其测试，分别执行面命令： 注意： bin/hadoop的执行条件是在hadoop_home中，我这里是 ??$ mkdir input $ cp etc/hadoop/*.xml input $bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.0.jar grep input output dfs[a-z.]+ hadoopjar.png (12.32 KB, 下载次数: 2)  HYPERLINK /forum.php?mod=attachmentaid=MTQ0MzR8MDA0YzJlNTF8MTQ2NTY5ODgxNnwwfDEyNzk4nothumb=yes \t _blank 下载附件 ? HYPERLINK javascript:; 保存到相册 2015-4-27 18:08 上传 $ cat output/* output.png (5.83 KB, 下载次数: 2)  HYPERLINK /forum.php?mod=attachmentaid=MTQ0MzV8ZmRhNjM1NzF8MTQ2NTY5ODgxNnwwfDEyNzk4nothumb=yes \t _blank 下载附件 ? HYPERLINK javascript:; 保存到相册 2015-4-27 18:10 上传 上面本地模式，我们知道就可以，我们下面继续配置伪分布模式 4.伪分布模式 我这里的全路径：/home/crh/hadoop-2.7.2/etc/hadoop 修改文件etc/hadoop/core-site.xml 添加如下内容： 含义：接收Client连接的RPC端口，用于获取文件系统metadata信息。 复制代码 configuration property namefs.de