Hadoop大数据零基础高端实战培训系列配文本挖掘项目大数据Hadoop实战视频教程就从最基础的Java语法、数据库、Linux讲起到深入Hadoop大数据技术所必须的所有知识,设计Hadoop生态圈所有常用组件,包括但不限于:Greenplum数据库、HBase、Hive、Pig、ZooKeepe...
分类:
其他好文 时间:
2014-09-18 14:33:03
阅读次数:
267
1.hbase安装cd/root/softtarzxvfhbase-0.98.5-hadoop2-bin.tar.gzmvhbase-0.98.5-hadoop2/usr/local/hadoop/hbase2.添加环境变量(所有节点都增加)#vim/etc/profileexportHBASE_HOME=/usr/local/hadoop/hbaseexportPATH=$PATH:/usr/local/hadoop/hbase/bin#source/etc/profile3...
分类:
数据库 时间:
2014-09-18 09:52:54
阅读次数:
265
hbase-0.98.1-cdh5.1.0伪分布式安装...
分类:
其他好文 时间:
2014-09-17 16:56:12
阅读次数:
171
我之前在传统IT公司干活,后来来了互联网,感受到了很多不同,其中有一点就是两者使用到的技术有一些差别。比如说分布式调用技术。
我在的这家公司内部的服务架构是基于Thrift的,服务基于Thrift进行发布,以至于很多人没有听过、使用过Web Service。
话说传统IT传了很多年的SOA就是基于Web Service,已经有了一整套完整的理论和产品进行支持,互联网竟然很多没涉及过。后来想了想...
分类:
其他好文 时间:
2014-09-17 15:19:02
阅读次数:
378
自己没有仔细安装,从网上搜的安装技术文章,在此做个备份,以防后面用到;http://blog.csdn.net/hshxf/article/details/5567019http://blog.csdn.net/hshxf/article/details/5666145 ( thrift php客户...
分类:
其他好文 时间:
2014-09-17 13:23:22
阅读次数:
179
很多RPC技术都会使用中间语言来定义接口描述,比如Web Service常用的WSDL, Thrift使用的IDL。
这类文件都是接口定义/描述语言 (Interface Definition/Description Language),有几个特点:
1. 采用中间语言来描述接口,以及接口使用到的数据结构(类)
2. 一般都采用文本文件,方便传递
3. 语法上可以使用XML,也可以...
分类:
其他好文 时间:
2014-09-17 12:15:02
阅读次数:
278
HBase依靠ZooKeeper来感知集群成员及其存活性。如果一个服务器暂停了很长时间,它将无法给ZooKeeper quorum发送心跳信息,其它服务器会认为这台服务器已死亡。这将导致master为其启动恢复进程。当该服务器脱离停顿时,它会发现它的所有租约都已失效(指hbase
client端每次和regionserver交互的时候,都会在服务器端生成一个租约(Lease),租约的有效期由参...
分类:
其他好文 时间:
2014-09-17 12:06:02
阅读次数:
393
thrift 官网: http://thrift.apache.org/Thrift是一个软件框架,用于支持可扩展的跨语言服务的开发,它无缝的与C++,Java,Python,PHP,Ruby,Erlang, Perl, Haskell, C#, Cocoa, JavaScript, Node.js...
分类:
其他好文 时间:
2014-09-17 12:00:02
阅读次数:
194
下面看下hbase:meta 表的结构,hbase:meta表中,保存了每个表的region地址,还有一些其他信息,例如region的名字,HRegionInfo,服务器的信息。hbase:meta表中每一行对应一个单一的region。例如我们现在创建一个表名叫"t"。hbase:meta中对应的行...
分类:
其他好文 时间:
2014-09-17 11:52:12
阅读次数:
196
HTable和HTablePool都是HBase客户端API的一部分,可以使用它们对HBase表进行CRUD操作。下面结合在项目中的应用情况,对二者使用过程中的注意事项做一下概括总结。HTableHTable是HBase客户端与HBase服务端通讯的Java API对象,客户端可以通过HTable对...
分类:
其他好文 时间:
2014-09-17 08:54:51
阅读次数:
254