直接上图片web端用spring mvc4.0.5hadoop+hbase 伪分布实验环境已实现用户注册 登陆网盘管理：上传文件 创建文件夹 修改文件及文件夹 分享文件及文件夹 删除文件及文件夹仿百度文库浏览文档 和下载文件功能。关注用户管理： 关注和取消关注用户文件分享：分享列表查看
分类：
其他好文 时间：
2014-08-02 18:13:13
阅读次数：
205
设定hbase的数据目录，修改conf/hbase-site.xml hbase.cluster.distributed true The mode the clusterwill be in. Possible values are ...
分类：
其他好文 时间：
2014-08-01 18:30:52
阅读次数：
202
作为一个中小型网站开发者，淘宝API的开放大大缩短了网站的开发周期和运作效率，面对海量的数据，开发者只要仔细阅读开发文档，熟悉相应的接口，就可以把数据导入自己的网站，这样就不必望洋兴叹了。
目前淘宝TOP的API接口正日益完善，但相应的接口和开发文档还不是很全，经过了3天的仔细研究，今晚上终于把淘宝API的调用弄明白了。不是很完善，文中如有瑕疵，还望批评指正，好，闲话到此为止，请看正文。本文...
场景: 2个数据库, 一个新,一个旧, 把旧的 数据库中的数据,导入到新的数据库中, 使用到了2个 EF实体模型, 新数据库 和 旧数据库中的表,有的名称是相同的 (但是结构是不同的) 旧的数据库中的 tb_area 表,只有2个字段 新数据库中的 tb_area 有很多字段
分类：
其他好文 时间：
2014-07-31 20:35:17
阅读次数：
668
最近，在做一个导入功能，在系统中使用PHPExcel类库，读取上传的Excel文件，然后进行字段映射，最后将Excel内的数据导入到系统中。其中，关于日期格式的导入，使我犯了难。 首先，如何导入日期，因为PHPExcel中日期格式在获取时得到的是数字，并不是日期字符串，于是，网上就有许多代码，用.....
分类：
Web程序 时间：
2014-07-31 19:33:47
阅读次数：
539
对于一些数据量较大的系统，数据库面临的问题除了查询效率低下，还有就是数据入库时间长。特别像报表系统，可能每天花费在数据导入上的时间就会长达几个小时之久。因此，优化数据库插入性能是很有意义的。 ?...
分类：
数据库 时间：
2014-07-31 17:24:37
阅读次数：
260
本文主要针对对HBase不了解的人。主要想基于个人的理解回答以下几个问题：
什么是HBase？何时用HBase？与Hive、Pig的区别？HBase的结构为何HBase速度很快？HBase常用的操作有哪些？HBase的一些配置和监控
什么是HBase？
HBase，是Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。使用HBase技术可以在廉...
分类：
其他好文 时间：
2014-07-31 16:59:07
阅读次数：
271
HBase复制是一种在不同HBase部署中复制数据的方法。它可以作为一种故障恢复的方法，并提供HBase层次的高可用性。在实际应用中，例如，可以将数据从一个面向页面的集群复制到一个MapReduce集群，后者可以同时处理新数据和历史数据。然后再自动将数据传回面向页面请求的集群。
HBase复制中最基本的架构模式是“主推送”（master-push），因为每个region server都有自己的W...
分类：
其他好文 时间：
2014-07-31 13:28:06
阅读次数：
285
这篇文章是看了HBase权威指南之后，依据上面的解说搬下来的样例，可是略微有些不一样。HBase与mapreduce的集成无非就是mapreduce作业以HBase表作为输入，或者作为输出，也或者作为mapreduce作业之间共享数据的介质。这篇文章将解说两个样例：1、读取存储在hdfs上的txt文...
分类：
其他好文 时间：
2014-07-31 12:09:16
阅读次数：
261
OpenTSDB是基于HBase的开源监控系统，可以支持上万规模集群监控和上亿数据点采集。其中TSDB代表Time Series Database，OpenTSDB在时间序列数据的存储和查询上都做了相当多的优化工作。
架构Overview
概念上OpenTSDB由三部分组成：tcollector数据采集、tsd数据服务和HBase数据存储。
数据采集流程
如上图，tco...
分类：
数据库 时间：
2014-07-30 17:33:34
阅读次数：
510
