Hadoop是云计算的事实标准软件框架，是云计算理念、机制和商业化的具体实现，是整个云计算技术学习中公认的核心和最具有价值内容。如何从企业级开发实战的角度开始，在实际企业级动手操作中深入浅出并循序渐进的掌握Hadoop是本课程的核心。云计算学习者的心声：如何从企业级开发的角度，不断动手实际操作，循序...
分类：
移动开发 时间：
2014-09-13 18:34:35
阅读次数：
300
Hadoop是云计算的事实标准软件框架，是云计算理念、机制和商业化的具体实现，是整个云计算技术学习中公认的核心和最具有价值内容。如何从企业级开发实战的角度开始，在实际企业级动手操作中深入浅出并循序渐进的掌握Hadoop是本课程的核心。云计算学习者的心声：如何从企业级开发的角度，不断动手实际操作，循序...
分类：
移动开发 时间：
2014-09-13 17:05:15
阅读次数：
333
Apache Phoenix 是 HBase 的 SQL 驱动。Phoenix 使得 HBase 支持通过 JDBC 的方式进行访问，并将你的 SQL 查询转成 HBase 的扫描和相应的动作。
兼容性：
Phoenix 2.x - HBase 0.94.x
Phoenix 3.x - HBase 0.94.x
Phoenix 4.x - HBase 0.98.1+...
分类：
其他好文 时间：
2014-09-13 00:50:44
阅读次数：
412
场景
我有一批平铺数据放在txt文件，其量大概在10W条，接下来我们希望将这10W条记录进行切割获取，并且将单条数据分析校验，然后插入到DB中。前提是我们使用的是HTTP文件上传方式来导入数据。现在的问题是：如果用户直接上传，然后我们一条条数据读取、校验并将其插入数据库，这个过程将会耗费非常长的时间（大概在1小时以上），而这么长的时间等待会导致apache、nginx或者浏览器端（...
分类：
Web程序 时间：
2014-09-13 00:50:04
阅读次数：
531
1.基础数据的维护，基本都是人工实现2.慢慢基于文件进行导入3.专业的数据交换平台=================================Kettle：数据导入不是采取数据库模式，因为数据库要求无逻辑，所以基于逻辑抽取，也就是一个ETL的过程。所以使用开源的Kettle工具： 1.完善的....
分类：
其他好文 时间：
2014-09-12 21:56:34
阅读次数：
366
今天在hbase中创建快照的时候遇到了如下错误：
hbase(main):004:0> snapshot 'booking', 'booking-snapshot-20140912'
ERROR: org.apache.hadoop.hbase.snapshot.HBaseSnapshotException: Snapshot { ss=booking-snapshot-20140912 ta...
分类：
其他好文 时间：
2014-09-12 17:21:23
阅读次数：
876
在 Oracle 数据库中，我们通常在不同数据库的表间记录进行复制或迁移时会用以下几种方法：
1. A 表的记录导出为一条条分号隔开的 insert 语句，然后执行插入到 B 表中
2. 建立数据库间的 dblink，然后用 create table B as select * from A@dblink where
...，或 insert into B select * from ...
分类：
数据库 时间：
2014-09-12 17:12:00
阅读次数：
453
分布式系统的现状，难以区分一个响应慢的节点和一个死掉的节点，所有的rpc流程都是基于timeout机制，我们期望更少的超时时间，则意味着有更高的误判率，误判的情况下hbase容错性虽然很好，但总要付出一些数据恢复的代价。 故障恢复主要牵涉到的组件有zk，hmaster namenode。zk承担锁....
分类：
其他好文 时间：
2014-09-12 16:47:23
阅读次数：
414
场景我有一批平铺数据放在txt文件，其量大概在10W条，接下来我们希望将这10W条记录进行切割获取，并且将单条数据分析校验，然后插入到DB中。前提是我们使用的是HTTP文件上传方式来导入数据。现在的问题是：如果用户直接上传，然后我们一条条数据读取、校验并将其插入数据库，这个过程将会耗费非常长的时间（大概在1小时以上），而这么长的时间等待会导致apache、nginx或者浏览器端（一般情况下是60分...
分类：
Web程序 时间：
2014-09-12 10:16:13
阅读次数：
221
