当前位置:首页 > 开发 > 开源软件 > 正文

hadoop-1.0.1在Linux环境下的安装

发表于: 2014-04-23   作者:chinrui   来源:转载   浏览次数:
摘要: hadoop-1.0.1在Linux环境下的安装   1、下载hadoop-1.0.1并将其上传至Linux服务器 下载链接如下:http://archive.apache.org/dist/hadoop/core/hadoop-1.0.1/hadoop-1.0.1.tar.gz 此处设定上传目录为/var/ftp/pub,并使用命令tar -xzvf hadoop-1.0.1.

hadoop-1.0.1在Linux环境下的安装

 

1、下载hadoop-1.0.1并将其上传至Linux服务器

下载链接如下:http://archive.apache.org/dist/hadoop/core/hadoop-1.0.1/hadoop-1.0.1.tar.gz

此处设定上传目录为/var/ftp/pub,并使用命令tar -xzvf hadoop-1.0.1.tar.gz进行解压,将解压文件移动到home目录下

 

2、hadoop配置

进入解压目录的conf里面:

 

设定JDK的安装位置:

修改hadoop-env.sh,在其中加入如下语句:

export JAVA_HOME=/usr/lib/jvm/jdk安装位置

 

设定Hadoop的核心文件core-site.xml,即配置HDFS的地址与端口号:

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>
  <property>
    <name>fs.default.name</name>
    <value>hdfs://localhost:9000</value>
  </property>
</configuration>

 

由于此处的Hadoop是单机版,我们将默认的备份方式修改成1,即修改hdfs-site.xml如下:

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<!-- Put site-specific property overrides in this file. -->

<configuration>
  <property>
    <name>dfs.replication</name>
    <value>1</value>
  </property>
</configuration>

 

我们继续配置MapReduce,修改mapred-site.xml如下:

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<!-- Put site-specific property overrides in this file. -->

<configuration>
  <property>
    <name>mapred.job.tracker</name>
    <value>localhost:9001</value>
  </property>
</configuration>

 

配置完成,在启动Hadoop之前 ,我们格式化Hadoop的文件系统HDFS。进入Hadoop的安装目录,输入命令:

bin/hadoop namenode -format

 

格式化完成后,我们来启动Hadoop。

输入命令,启动所有进程:

bin/start-all.sh

 

最后我们来验证Hadoop是否安装完成:

打开浏览器,输入网址:

http://localhost:50030(如果是Linux上的浏览器)
http://Linux服务器IP地址:50030(如果是在Windows上安装的虚拟机,而打开的是Windows的浏览器)
这里打开的是MapReduce的Web页面

(方法同上)
http://localhost:50070
http://Linux服务器IP地址:50070
这里打开的是HDFS的Web页面 

如果此处能够打开,则说明安装成功。

hadoop-1.0.1在Linux环境下的安装

  • 0

    开心

    开心

  • 0

    板砖

    板砖

  • 0

    感动

    感动

  • 0

    有用

    有用

  • 0

    疑问

    疑问

  • 0

    难过

    难过

  • 0

    无聊

    无聊

  • 0

    震惊

    震惊

编辑推荐
Groovy是Java平台上设计的面向对象的动态编程语言。跟Java一样运行在JVM上。 首先,在Groovy官网下
一、服务端安装 1. 上传ossec-hids-2.4.1.tar.gz至/home目录 2. 安装ossec #tar -zxvf ossec-hids-2
参考别人的做法,遇到问题上网查,下面就是安装步骤. 一、安装Apache2.2.22 1、到官网下载 http://htt
1)安装Ubuntu或其他Linux系统:    a)为减少错误,集群中的主机最好安装同一版本的Linux系统,我
Linux 环境下 Python 的安装过程 前言 一般情况下,Linux都会预装Python了,但是这个预装的Python版
一、安装Apache2.2.22 1、到官网下载 http://httpd.apache.org/download.cgi 2、解压 tar -zxvf htt
本文主要根据博主自己根据Apache官网中安装步骤,以及网上其他资源进行整合,详细介绍安装和配置Apa
参考别人的做法,遇到问题上网查,下面就是安装步骤. 一、安装Apache2.2.22 1、到官网下载 http://htt
Linux下,Hadoop环境的安装配置 d)关闭hadoop ./bin/stop-all.sh 先关闭了jobtracker,其次关闭slav
Tigase是一种XMPP服务器,可以作为采用XMPP协议的各种IM(Instant Messeging)工具(如Pandion、Spark
版权所有 IT知识库 CopyRight © 2009-2015 IT知识库 IT610.com , All Rights Reserved. 京ICP备09083238号