当前位置:首页 > 开发 > 互联网 > 正文

hadoop 0.20.203 数据迁移至 cdh3u3

发表于: 2012-08-29   作者:chenchao051   来源:转载   浏览次数:
摘要:     假如用hadoop0.20.203版本,hbase会提示hdfs不支持append特性而可能会导致数据丢失,而且事实上,这种情况在我们系统中已经遇到,在写数据的时候,rs挂掉,数据丢失。 暂时准备把hadoop迁移到cdh3u3上, 因为是不同版本之间的迁移,所以只能用hftp, ./hadoop distcp hftp://server1:50070/hb
    假如用hadoop0.20.203版本,hbase会提示hdfs不支持append特性而可能会导致数据丢失,而且事实上,这种情况在我们系统中已经遇到,在写数据的时候,rs挂掉,数据丢失。 暂时准备把hadoop迁移到cdh3u3上, 因为是不同版本之间的迁移,所以只能用hftp,
./hadoop distcp hftp://server1:50070/hbase/test hdfs://server1:9011/hbase/test 从前面拷到后面, 同时加入还需要迁移hbase的话,可以把保存在hdfs上的文件全部拷到新的集群中,然后执行./hbase org.jruby.Main add_table.rb /hbase/xxx ,将表加入到meta中,当然这个是要重新启动hbase的。

hadoop 0.20.203 数据迁移至 cdh3u3

  • 0

    开心

    开心

  • 0

    板砖

    板砖

  • 0

    感动

    感动

  • 0

    有用

    有用

  • 0

    疑问

    疑问

  • 0

    难过

    难过

  • 0

    无聊

    无聊

  • 0

    震惊

    震惊

编辑推荐
1、软件环境: Eclipse:Indigo Service Release 1 Hadoop:Hadoop 0.20.203 2、设置系统环境变量 J
一般来说Map/Reduce都是输出一组文件,但是有些情况下需要我们输出多组文件,好比不同学校分成不同
前段时间帮朋友一个创业的朋友做一个网站迁移。之前他的网站使用的自己的服务器托管在IDC机房,后来
IBM® Rational® Data Architect 提供了当前市场上很多数据建模工具所没有的独特特性。将 CA ERwin D
参阅:http://blog.sina.com.cn/s/blog_665813d201014n9h.html 引言: 尝试将 Oracle 10gR2 数据迁
参阅:http://blog.sina.com.cn/s/blog_665813d201014n9h.html 引言: 尝试将 Oracle 10gR2 数据迁
如果我们想知道当前运行的hadoop集群的状态,可以通过hadoop的客户端和web页面来获得,但是如果我们
本文主要介绍Hadoop的数据管理,主要包括Hadoop的分布式文件系统HDFS、分布式数据库HBase和数据仓库
摘要:Admaster数据挖掘总监 随着互联网、移动互联网和物联网的发展,谁也无法否认,我们已经切实地
GIT客户端与SVN服务器 原来很多代码还是存在SVN服务器中,所以使用GIT客户端配合SVN服务器是一种不
版权所有 IT知识库 CopyRight © 2009-2015 IT知识库 IT610.com , All Rights Reserved. 京ICP备09083238号