微博的诞生、云计算、物联网、移动互联网等各种爆炸式数据，给商业智能的蓬勃发展提供了良好的“大数据”环境。大数据为BI带来了海量数据。对挖掘来说，大数据量要更容易对比.抢夺大数据市场，需要具备一定的实力，报表的呈现和简易分析只是停留在“B”的阶段，要想达到“I”的阶段，必须要结合整个大环境、大行业的数...
分类：
其他好文 时间：
2014-05-26 07:08:41
阅读次数：
221
一、使用Sqoop将MySQL中的数据导入到HDFS/Hive/HBase
二、使用Sqoop将HDFS/Hive/HBase中的数据导出到MySQL
2.3 HBase中的数据导出到mysql
目前没有直接的命令将HBase中的数据导出到MySQL，但可以先将HBase中的数据导出到HDFS中，再将数据导出到MySQL。
三、使用Sqoop将Orac...
分类：
数据库 时间：
2014-05-26 05:48:46
阅读次数：
304
对于开源的东东，尤其是刚出来不久，我觉得最好的学习方式就是可以看源码和doc，测试它的例子
为了方便查看源码，关联导入源码的项目
block数据块，在配置文件hdfs-default.xml中可以查看到,记住要修改不是在这里
block文件存储块是最基本的单位
查看block存放位置，配置文件中查看
如果文件大于64M会占两个块，meta文件是校验...
分类：
其他好文 时间：
2014-05-26 05:30:58
阅读次数：
227
写在前面一：
本文总结“Hadoop生态系统”中的其中一员——Apache Flume
写在前面二：
所用软件说明：
一、什么是Apache Flume
官网：Flume is a distributed, reliable, and available
service for efficiently
collecting, aggregating, and m...
分类：
其他好文 时间：
2014-05-26 04:32:10
阅读次数：
359
推荐编写C++的代码风格，看似容易，坚持不易，且写且珍惜！ --陈国林
1. 版本和版本声明
版本和版本文件声明位于头文件和定义文件的开头，主要内容
(1)版本信息
(2)文件名称、标识符、摘要
(3)当前的版本号、作者、修改日期
(4)版本历史信息
2. 程序版式
(1)在每个类声明之后、每个函数定义之后都要加上一个空行
(2)一行代码只做一件事情
(3)if、for...
分类：
编程语言 时间：
2014-05-24 19:08:08
阅读次数：
336
笔者在项目中遇到了大量节点数据导入到NEO4J数据库时内存溢出的问题，在翻阅了官方文档后做了以下测试与大家分享，如果不对，还请大家指出。
CPU: I3 2.4Ghz 4核, 内存8G
?方式一：采用其原生接口操作
JVM：-Xms1024m -Xmx1024m -Xmn512m -XX:PermSize=128m -XX:MaxPermSize=256m
4000 节点（50个属性），4000关系：1秒, 其间cpu使用率25%，761M
8000节点（50个属性），8000关系：2秒, 其间cp...
分类：
其他好文 时间：
2014-05-24 19:07:05
阅读次数：
524
描述
：我们现在有很多数据，分表存放，现在需要有精度条的导出。最后面有完整代码。效果图：点击导出，实现点击导出统计完成之后点击确定前面导出操作简单，从第二个导出操作开始：点击"确定"调用exportCsv函数导出exportCvs函数如下
function exportCsv(){ //清除等待的转...
分类：
其他好文 时间：
2014-05-24 14:05:01
阅读次数：
420
最近在做一个投票系统，关于缓存的使用上稍微思考了下，总结了以下几点：1.缓存的数据，一般为数据库查询出来的数据。要么就是大数据，要么就是访问频率很高的数据。2.缓存只是一个提高效率的手段，但不保险，编写代码的时候，要考虑万一缓存不命中的情况，而不知只单纯的从数据库中提取数据。一般的思路是，查询缓存数...
分类：
其他好文 时间：
2014-05-24 12:41:49
阅读次数：
229
hadoop安装计大体上按这个做就好了http://blog.csdn.net/hitwengqi/article/details/8008203需要修改hadoop-env.shexport
JAVA_HOME=/usr/lib/jvm/java-6-openjdk-amd64export PAT...
分类：
其他好文 时间：
2014-05-24 11:17:22
阅读次数：
210
今天终于把近5G的数据上传到了SharePoint2010站点上，上传过程中发现几个要注意的问题：
1. 用360浏览器打开SP 2010站点，发现在workspace同步和windows explorer二个按钮都被禁掉了（但workspace可以连到sp
site进行同步），但检查了站点设置里面...
分类：
其他好文 时间：
2014-05-24 10:24:58
阅读次数：
230
