hbase中多次加载root及meta的bug - 蓝色时分 - ITeye博客

`

lc_koven

浏览: 349999 次
性别:
来自: 杭州

最近访客更多访客>>

<苍狼>

gaoming1990

libisthanks

m635674608

博主相关

博客

微博

相册

收藏

留言

关于我

文章分类

社区版块

存档分类

最新评论

penkee：为何我启动 zookKeeper bookie 10 不能创 ...
bookkeeper安装及测试体验
Golden-jin： 1楼也好时髦呀
bookkeeper简单分析
xGss2000：要是减少到300个 region，block就0.04s了。话 ...
多region下的hbase写入问题
brandom520：请问lz,我从hbase0.94版本上的数据导入到0.96.1 ...
在不同版本hdfs集群之间转移数据
huanghaifeng1990：您好，我想请问一下，我执行了会发生OOM溢出的Deflater ...
perftools查看堆外内存并解决hbase内存溢出

hbase中多次加载root及meta的bug

博客分类：

hbase

阅读更多

执行以下case可以见到root或meta被加载两次：

1 kill掉root和meta表所在的rs
2 start该台rs
3 立即再次kill掉这台rs
4 立即再次start该台rs

    原因：
    当ROOT表和META表所在的server如果挂掉了，不管是重启这台rs还是等待它自然超时，master都会触发ServerShutdownHandler。此时如果这台server再次挂掉，master将再次触发ServerShutdownHandler。而ServerShutdownHandler中会加载所有的region，其中root和meta可能被加载两次（其它region不会重复加载，因为是通过RIT管理的）
    解决办法是在ServerShutdownHandler中对root和meta在加载之前做一次检测，看是否己经被加载。可参见HBASE-3914及HBASE-4590

1
顶

1
踩

分享到：

splitlog期间丢失数据的问题 | 两次hbase丢失数据的故障及原因分析

2011-10-18 22:24
浏览 3121
评论(0)
分类:开源软件
查看更多

评论

发表评论

您还没有登录,请您登录后再发表评论

相关推荐

hbase-meta-repair-hbase-2.0.2.jar: HBase 元数据修复工具包。 ①修改 jar 包中的application.properties，重点是 zookeeper.address、zookeeper.nodeParent、hdfs....③开始修复 `java -jar -Drepair.tableName=表名 hbase-meta-repair-hbase-2.0.2.jar`

面向HBase的大规模数据加载研究: 分布式数据库HBase在大规模数据加载中较传统关系型数据库有较大的优势但也存在很大的优化空间.基于Hadoop分布式平台搭建HBase环境,并优化自定义数据加载算法.首先,分析HBase底层数据存储,实验得出HBase自带数据加载...

java大数据作业_3HBase: 4. HBase部署时如何指定多个zookeeper 5. HBase shell是基于哪种JVM运行的语言实现的 6. HBase shell如何写过滤条件 7. 如何删除HBase中的表 8. 简述HBase的表操作对象 9. HBase中为了提升并行插入数据的速度，如何...

多线程 hbase: 多线程 hbase

HBase中Coprocessor的介绍以及实际业务场景中的使用.pdf: 讲师：陈杨——快手大数据高级研发工程师 ...内容概要：(1)讲解hbase coprocessor的原理以及使用场景，(2) coprocessor整个流程实战，包括开发，加载，运行以及管理(3)结合1，2分析coprocessor在rsgroup中的具体使用

Hbase 官方中文文档: Hbase中文文档。想0分分享，结果不能设置0分了；坑爹了。

hbase中文官方文档: hbase中文官方文档，非常不错，值得推荐

java操作Hbase之从Hbase中读取数据写入hdfs中源码: java操作Hbase之从Hbase中读取数据写入hdfs中源码，附带全部所需jar包，欢迎下载学习。

Python-HBase中文参考指南: HBase 中文参考指南

HBase 0.97 中文文档: HBase 0.97 中文文档 HBase 0.97 中文文档 HBase 0.97 中文文档

hive和hbase整合: 配置，测试，导入数据详细操作，CREATE TABLE hive_hbase_table(key int, value string,name string) hadoop jar /usr/lib/hbase/hbase-...注意导入的时候要先在hbase中创建idap_dim_chrg_item_catgy这个表 create

hbase-0.94脚本hbase在cygwin的环境的bug: NULL 博文链接：https://winseclone.iteye.com/blog/1734818

HbaseTemplate 操作hbase: java 利用 sping-data-hadoop HbaseTemplate 操作hbase find get execute 等方法可以直接运行

大数据开发之Hbase基本使用及存储设计实战教程（视频+笔记+代码）: │ Day15[Hbase 基本使用及存储设计].pdf │ ├─02_视频 │ Day1501_Hbase的介绍及其发展.mp4 │ Day1502_Hbase中的特殊概念.mp4 │ Day1503_Hbase与MYSQL的存储比较.mp4 │ Day1504_Hbase部署环境准备.mp4 │ Day...

HBase原理及实例: HBase原理及实例

HBase中文教程 PDF 下载: HBase中文教程

Hbase中文文档: 3.1. 从HBase 0.20.x or 0.89.x 升级到 HBase 0.90.x 3.2. 从 0.90.x 到 0.92.x 4. The HBase Shell 4.1. 使用脚本 4.2. Shell 技巧 5. 数据模型 5.1. 概念视图 5.2. 物理视图 5.3. 表 5.4. 行 5.5. 列族 5.6. Cells...

HBase实战%28中文扫描版%29.pdf: HBase

pinpoint的hbase初始化脚本hbase-create.hbase: 搭建pinpoint需要的hbase初始化脚本hbase-create.hbase

hbase中文文档: 这是 Apache HBase的官方文档, Hbase是一个分布式,版本化(versioned)，构建在 Apache Hadoop和 Apache ZooKeeper上的列数据库.专业人士翻译

Global site tag (gtag.js) - Google Analytics