当前位置:首页 > 开发 > 开源软件 > 正文

单机安装hadoop环境

发表于: 2013-11-22   作者:emptyhan   来源:转载   浏览次数:
摘要: 本文根据网上资料实现基于单机的伪分布式运行模拟,并记录此过程中遇到的问题。 主要资料博客地址:http://www.cnblogs.com/panderen/archive/2011/05/17/2048651.html 一、实验环境及需要的软件: 实验环境:Windows7旗舰版 32位系统 需要的软件: 1、Jdk1.6以上 下载地址:http://www.oracle.com/
本文根据网上资料实现基于单机的伪分布式运行模拟,并记录此过程中遇到的问题。
主要资料博客地址:http://www.cnblogs.com/panderen/archive/2011/05/17/2048651.html

一、实验环境及需要的软件:
实验环境:Windows7旗舰版 32位系统
需要的软件:
1、Jdk1.6以上 下载地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html
2、Cygwin  下载地址:http://www.cygwin.com/
3、稳定版hadoop  下载地址:http://hadoop.apache.org/common/releases.html#Download
二、实验步骤:
1、安装jdk到本机
注意:jdk安装路径不要带空格(例如:C:\Program Files),带空格会影响hadoop的运行。
2、安装Cygwin
此实验下载的版本为1.7.25,安装步骤请参见Hadoop开发者入门专刊中:“在Windows上安装Hadoop教程”
个人遇到的问题:
a、注意选择上面说的需在Cygwin中安装的包(点击所需要的包左侧的Skip);
b、上面说到的http://www.cygwin.cn链接不上了,故选择了http://mirrors.163.com/cygwin/;
c、如果没安装成功,删除安装目录文件,运行regedit.exe进入注册表,删除Cygwin文件,目录所在位置如下:HKEY_CURRENT_USER\Software\Cygwin  HKEY_LOCAL_MACHINE\SOFTWARE\Cygwin
d、环境变量配置仅需把平时我们配JDK的方法配好,Cygwin仅需把bin所在目录加入,usr下的不用配;
e、可能版本的问题,安装sshd服务时比专刊中的步骤更多,仔细阅读提示信息,配置要创建两个账户(cyg_server、sshd),如无法启动服务,查看cygwin安装目录下var/log/sshd.log文件中的信息来解决问题。
f、安装好sshd后,该服务可以在装好的Cygwin中输入net start sshd命令启动或通过"控制面板-管理工具-服务-CYGWIN sshd"启动。
3、安装hadoop
a、下载稳定版本,此实验下载的是1.2.1,安装步骤请参见Hadoop开发者入门专刊中:“在Windows上安装Hadoop教程”
b、运行cygwin,进入hadoop安装目录,启动hadoop,例如:
bin/start-all.sh  //启动命令
bin/stop-all.sh   //停止命令
启动后浏览器访问:http://localhost:50070/ 和 http://localhost:50030/,能正常访问,说明安装成功。

单机安装hadoop环境

  • 0

    开心

    开心

  • 0

    板砖

    板砖

  • 0

    感动

    感动

  • 0

    有用

    有用

  • 0

    疑问

    疑问

  • 0

    难过

    难过

  • 0

    无聊

    无聊

  • 0

    震惊

    震惊

编辑推荐
首先要了解一下Hadoop的运行模式: 单机模式(standalone) 单机模式是Hadoop的默认模式。当首次解
安装hadoop 准备环境: centos5.5final oracle的虚拟机 jdk安装包 hadoop稳定版本1.2.1 1.安装虚拟
安装ssh 1 apt-get install ssh 安装rsync 1 apt-get install rsync 配置ssh免密码登录 1.ssh-keyge
转自: http://blog.csdn.net/dragon_fire/article/details/7587226 下载完之后,命令行输入:tar -
安装hadoop 准备环境: centos5.5final oracle的虚拟机 jdk安装包 hadoop稳定版本1.2.1 1.安装虚拟
网络上关于如何单机模式安装Hadoop的文章很多,按照其步骤走下来多数都失败,按照其操作弯路走过了
1. Ubuntu环境安装和基本配置 本例程中在MAC上安装使用的虚拟机Ubuntu系统(64位,desktop); 基本
  本文仅作为学习笔记,供大家初学Hadoop时学习参考。初学Hadoop,欢迎有经验的朋友进行指导与交流
安装ssh <table border="0" style="font-family: Consolas, 'Bitstream Vera Sans Mono', 'Couri
Hadoop是一个用Java编写的用于运行与物理集群中的框架,吸收了GFS和mapreduce编程模型的特性。Hadoo
版权所有 IT知识库 CopyRight © 2009-2015 IT知识库 IT610.com , All Rights Reserved. 京ICP备09083238号