单机安装hadoop环境
本文根据网上资料实现基于单机的伪分布式运行模拟,并记录此过程中遇到的问题。 主要资料博客地址:http://www.cnblogs.com/panderen/archive/2011/05/17/2048651.html
一、实验环境及需要的软件: 实验环境:Windows7旗舰版 32位系统 需要的软件: 1、Jdk1.6以上 下载地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html 2、Cygwin 下载地址:http://www.cygwin.com/ 3、稳定版hadoop 下载地址:http://hadoop.apache.org/common/releases.html#Download 二、实验步骤: 1、安装jdk到本机 注意:jdk安装路径不要带空格(例如:C:\Program Files),带空格会影响hadoop的运行。 2、安装Cygwin 此实验下载的版本为1.7.25,安装步骤请参见Hadoop开发者入门专刊中:“在Windows上安装Hadoop教程” 个人遇到的问题: a、注意选择上面说的需在Cygwin中安装的包(点击所需要的包左侧的Skip); b、上面说到的http://www.cygwin.cn链接不上了,故选择了http://mirrors.163.com/cygwin/; c、如果没安装成功,删除安装目录文件,运行regedit.exe进入注册表,删除Cygwin文件,目录所在位置如下:HKEY_CURRENT_USER\Software\Cygwin HKEY_LOCAL_MACHINE\SOFTWARE\Cygwin d、环境变量配置仅需把平时我们配JDK的方法配好,Cygwin仅需把bin所在目录加入,usr下的不用配; e、可能版本的问题,安装sshd服务时比专刊中的步骤更多,仔细阅读提示信息,配置要创建两个账户(cyg_server、sshd),如无法启动服务,查看cygwin安装目录下var/log/sshd.log文件中的信息来解决问题。 f、安装好sshd后,该服务可以在装好的Cygwin中输入net start sshd命令启动或通过"控制面板-管理工具-服务-CYGWIN sshd"启动。 3、安装hadoop a、下载稳定版本,此实验下载的是1.2.1,安装步骤请参见Hadoop开发者入门专刊中:“在Windows上安装Hadoop教程” b、运行cygwin,进入hadoop安装目录,启动hadoop,例如: bin/start-all.sh //启动命令 bin/stop-all.sh //停止命令 启动后浏览器访问:http://localhost:50070/ 和 http://localhost:50030/,能正常访问,说明安装成功。