数据抽取的开源工具一个是RDBMS一个是基于分布式的数据ETL工具====================原则： 主要是映射规则，基础字典数据，详细数据注意与ESB的编程模型的差异（编程思想上）
分类：
其他好文 时间：
2014-09-24 03:20:35
阅读次数：
302
hive和hbase高版本集成，错误分析和解决...
分类：
其他好文 时间：
2014-09-22 20:04:03
阅读次数：
229
最后一部分了。。。分两章吧。HBase和Hadoop紧密相关，更为具体的部署和运维内容推荐HadoopOperations和HBaseAdministration
Cookbook。本文粗粒度列出一些HBase部署运维的最佳实践和基本原则。
集群规划
一个完整的HBase集群包含HBase Master，ZooKeeper，RegionServers和Hadoop相关组件。生产集群按照规模...
分类：
其他好文 时间：
2014-09-22 20:00:13
阅读次数：
201
电脑换了重新装了下系统，在本机ubuntu 的环境下搭建hadoopCDH4.5 伪分布式。进入Hbase shell，在创建表的时候出现异常如下：ERROR: org.apache.hadoop.hbase.PleaseHoldException: org.apache.hadoop.hbase....
分类：
其他好文 时间：
2014-09-22 00:58:11
阅读次数：
470
一、前言 最近一年了吧，总是忙于特定项目的业务分析和顶层设计，很少花时间和精力放到具体的技术细节，感觉除了架构理念和分析能力的提升，在具体技术层次却并没有多大的进步。因为一些原因，总被人问及一些技术细节，很多细节都模糊了，花点时间，温习一下吧。技术部分将作为下一个阶段的工作重点。 二、操作说明查看Z...
分类：
其他好文 时间：
2014-09-21 11:33:10
阅读次数：
257
1.hbase的balance策略是region数量策略，即维持每个regionserver的region数量基本一致，这并未考虑一个table的region可能都落到一个refionserver的不好情况。这就需要开发者自己开发LoadBalancer插件。有三种策略：基于表Table级别的Bal...
分类：
其他好文 时间：
2014-09-21 01:53:19
阅读次数：
237
NoSQL现在风生水起，hbase的使用也越来越广，但目前几乎所有的NoSQL产品在运维上都没法和DB相提并论，在这篇blog中来总结下我们在运维hbase时的一些问题以及解决的方法，也希望得到更多hbase同行们的建议，:)在运维hbase时，目前我们最为关注的主要是三大方面的状况：1. Clus...
分类：
其他好文 时间：
2014-09-21 01:12:09
阅读次数：
235
单台master的配置hbase.mastermaster:60000这是我们通常配置的，这样就定义了master是的ip和端口。但是当我们需要配置多台master进行，我们只需要提供端口，因为选择真正的master的事情会又zookeeper去处理。多台master的配置hbase.master....
分类：
其他好文 时间：
2014-09-21 01:04:49
阅读次数：
366
HBase中有两张特殊的Table，-ROOT-和.META..META.:记录了用户表的Region信息，它可以有多高region（这的意思是说.META.表可以分 裂成多个region，和用户表一样）-ROOT-：记录了.META.表的Region信息，-ROOT-只有一个region(也就是说...
分类：
其他好文 时间：
2014-09-21 00:25:29
阅读次数：
220
