当前位置:首页 > 开发 > 开源软件 > 正文

【Hadoop十四】Hadoop提供的脚本的功能

发表于: 2015-05-09   作者:bit1129   来源:转载   浏览:
摘要: 1. hadoop-daemon.sh 1.1 启动HDFS ./hadoop-daemon.sh start namenode ./hadoop-daemon.sh start datanode  通过这种逐步启动的方式,比start-all.sh方式少了一个SecondaryNameNode进程,这不影响Hadoop的使用,其实在 Hadoop2.0中,SecondaryNa

1. hadoop-daemon.sh

1.1 启动HDFS

./hadoop-daemon.sh start namenode
./hadoop-daemon.sh start datanode

 
通过这种逐步启动的方式,比start-all.sh方式少了一个SecondaryNameNode进程,这不影响Hadoop的使用,其实在 Hadoop2.0中,SecondaryNameNode的功能被NameNode HA(Standby NameNode取代)
可以通过查看日志/home/hadoop/software/hadoop-2.5.2/logs/hadoop-hadoop-datanode-hadoop.master.log
HDFS启动成功后就可以通过浏览器访问50070,可以看到HDFS的状态,而无需YARN启动才使用HDFS

 

1.2 启动JournalNode

./hadoop-daemon.sh start journalnode

2. yarn-daemon.sh


启动YARN

./yarn-daemon.sh start resourcemanager
./yarn-daemon.sh start nodemanager



【Hadoop十四】Hadoop提供的脚本的功能

  • 0

    开心

    开心

  • 0

    板砖

    板砖

  • 0

    感动

    感动

  • 0

    有用

    有用

  • 0

    疑问

    疑问

  • 0

    难过

    难过

  • 0

    无聊

    无聊

  • 0

    震惊

    震惊

编辑推荐
1.提出问题 在上篇博文中,提到了为什么要配置ssh免密码登录,说是Hadoop控制脚本依赖SSH来执行针对
本文以start-dfs.sh为例向下延展解释各脚本的作用和相互关系,对于start-yarn.sh同理可证。下图解释
一.FSDataset类图 二.FSVolume FSDir物理概念 三.Block Block类只代表一个block的标识,看Block类的
4 Hadoop
如今Apache Hadoop已成为大数据行业发展背后的驱动力。Hive和Pig等技术也经常被提到,但是他们都有
5 Hadoop
《Hadoop: The Definitive Guide》reading notes: This, in a nutshell, is what Hadoop provides:
6 Hadoop
《Hadoop: The Definitive Guide》reading notes: This, in a nutshell, is what Hadoop provides:
倒排索引是文档检索系统中最常用到的数据结果,应用于搜索引擎,根据内容来查找文档的一种方式。进
8 hadoop
hadoop官方网站: http://hadoop.apache.org/ 中文介绍参考网站: http://hadoop.apache.org/docs/r1.0
9 hadoop
Map Reduce什么的我是不懂啊。 今天是帮马同学搭建hadoop。 用的2.2.0版本,结果运行时发现提示 “l
10 Hadoop
Hadoop一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发
版权所有 IT知识库 CopyRight © 2009-2015 IT知识库 IT610.com , All Rights Reserved. 京ICP备09083238号