(1)HMaster SplitLogManager
// get a list for previously failed RS which need log splitting work
// we recover hbase:meta region servers inside master initialization and
// handle other failed servers in SSH in order to start up master node ASAP
Set<ServerName> previouslyFailedServers = this.fileSystemManager
.getFailedServersFromLogFolders();
LogSplit工作经由SSH(ServerShutdownHandler)触发,
M_SERVER_SHUTDOWN (70, ExecutorType.MASTER_SERVER_OPERATIONS)
this.executorService.startExecutorService(ExecutorType.MASTER_SERVER_OPERATIONS,
conf.getInt("hbase.master.executor.serverops.threads", 5));
HMaster每次最多处理 hbase.master.executor.serverops.threads 这么多个SSH,如果启动时有大量的异常Server需要处理时,可以调大这个参数。
(2)HRegionServer SplitLogWorker
https://issues.apache.org/jira/browse/HBASE-9736
this.maxConcurrentTasks =
conf.getInt("hbase.regionserver.wal.max.splitters", DEFAULT_MAX_SPLITTERS);
同时可以获取多个Task来处理。一个Task实际对应一个HLog文件。
相关推荐
HBase2集群配置.pdf HBase2集群配置.pdf HBase2集群配置.pdf HBase2集群配置.pdf
hbase和zookeeper的详细配置
文档是我自己一步步完成实验写成的,给初学大数据的朋友共享一下希望能有所帮助
Linux下,基于Hadoop集群的Zookeeper、Hbase的安装及配置指导文档。 HBase作为Hadoop生态系统的一部分,是基于hadoop集群的HDFS之上的分布式数据库,HDFS为HBase提供了高可靠的底层存储支持和数据的持久化;hadoop...
大数据技术基础实验报告-HBase安装配置和应用实践
hbase_常用配置参数_以及学习笔记讲解_以及各种原理图
指导手册06:HBase安装部署 hbase配置文件
hbase配置需要的配置文件已配置好,可以直接拿来用
HBase开启审计日志
描述了centOS6.5(虚拟机)环境下,hadoop2.7.1+hbase1.3.5版本的安装配置过程,以及个人在安装过程中遇到的问题与总结
HBase安装与配置资源下载:hbase-1.2.6
HBase官方指南——配置详解篇;HBase官方指南——配置详解篇
第8章 HBase组件安装配置.docx
HBase配置
Linux环境下Hbase单机配置超详细版本,图文教程
HBase的配置,最好是在本人hdfs环境配置好了的前提下在进行配置
HBase配置文件若干配置.zip
log4j.properties配置详解 使用教程
nosql实验一-HBase的安装与配置
hbase配置内置的zookeeper;hbase配置内置的zookeeper;