错误如下： 我理解是做完ha后，hbase的coprocessor协处理需要做一下更新，解决办法如下： 参考： http://apache-kylin.74782.x6.nabble.com/Timeout-visiting-cube-td4843.html ...
分类：
其他好文 时间：
2017-09-17 13:44:42
阅读次数：
758
1，Error: Could not find or load main class namenode-format 这个是错误的把hadoop namenode -format 命令写成hadoop namenode-format 2, WARN util.NativeCodeLoader: Un ...
分类：
其他好文 时间：
2017-09-17 11:36:14
阅读次数：
161
cd 到hadoop中 然后格式化 进入到 bin下 找到 hdfs 然后看看里面有哈参数： ./hdfs namenode -format 格式化 然后启动 sbin/start-dfs.sh hdfs的关系界面 http://192.168.94.132:50070/ 创建文本： 创建个目录 h ...
分类：
其他好文 时间：
2017-09-16 13:41:18
阅读次数：
150
每个文件按块方式存储, 每个块的元数据存储在namenode的内存中 Hadoop存档文件或HAR文件是一个更高效的文件存档工具,它将文件存入HDFS块,在减少内存使用的同时,允许对文件进行透明地访问 Hadoop存档文件可以用作MapReduce的输入 使用Hadoop存档工具 Hadoop存档是 ...
分类：
其他好文 时间：
2017-09-07 19:27:27
阅读次数：
87
hbase.rootdir 这个目录是region server的共享目录，用来持久化HBase。URL需要是'完全正确'的，还要包含文件系统的scheme。例如，要表示hdfs中的'/hbase'目录，namenode 运行在namenode.example.org的9090端口。则需要设置为hd ...
分类：
其他好文 时间：
2017-09-06 18:18:08
阅读次数：
153
1：分布式文件系统（Distributed File System）： （1）：数据量越来越多，在一个操作系统管辖的范围存不下了，那么就分配到更多的操作系统管理的磁盘中，但是不方便管理和维护，因此迫切需要一种系统来管理多台机器上的文件，这就是分布式文件管理系统 。（2）：是一种允许文件通过网络在多台 ...
分类：
其他好文 时间：
2017-09-03 17:55:36
阅读次数：
198
原有环境 http://www.cnblogs.com/ilifeilong/p/7406944.html 现计划向集群新增一台datanode,如表格所示 1. 配置系统环境 主机名,ssh互信,环境变量等 2. 修改namenode节点的slave文件,增加新节点信息 3. 在namenode节 ...
分类：
其他好文 时间：
2017-09-02 00:07:17
阅读次数：
247
集中的HDFS缓存管理，该机制可以让用户缓存特定的hdfs路径，这些块缓存在堆外内存中。namenode指导datanode完成这个工作。Centralized cache management in HDFS has many significant advantages.Explicit pin... ...
分类：
系统相关 时间：
2017-08-30 23:42:15
阅读次数：
328
安装zookeeper下载zookeeper编辑zookeeper配置文件创建myid文件启动zookeeper配置HDFS HA配置手动HA配置自动HA启动HDFS HA namenode负责管理整个hdfs集群,如果namenode故障则集群将不可用.因此有必须实现namenode高可用. hd... ...
分类：
其他好文 时间：
2017-08-30 22:38:24
阅读次数：
347
首先说一下,这里是虚拟机环境. 1.用vbox安装centos6.8-mini 注意不要使用复制的方式安装,复制的虚拟机网络不通 安装如下: 主机 ip 角色 内存 hadoop1 192.168.0.10 namenode,HMASTER 2G hadoop2 192.168.0.11 namen... ...
分类：
系统相关 时间：
2017-08-30 22:31:14
阅读次数：
318
