欢迎转载，转载请注明出处，徽沪一郎概要在新近发布的spark 1.0中新加了sql的模块，更为引人注意的是对hive中的hiveql也提供了良好的支持，作为一个源码分析控，了解一下spark是如何完成对hql的支持是一件非常有趣的事情。Hive简介Hive的由来以下部分摘自Hadoop defini...
分类：
其他好文 时间：
2014-07-07 14:45:58
阅读次数：
224
欢迎转载，转载请注明出处，徽沪一郎。楔子Spark计算速度远胜于Hadoop的原因之一就在于中间结果是缓存在内存而不是直接写入到disk，本文尝试分析Spark中存储子系统的构成，并以数据写入和数据读取为例，讲述清楚存储子系统中各部件的交互关系。存储子系统概览上图是Spark存储子系统中几个主要模块...
分类：
其他好文 时间：
2014-07-07 14:30:41
阅读次数：
304
欢迎转载，转载请注明出处，徽沪一郎。楔子Hive是基于Hadoop的开源数据仓库工具，提供了类似于SQL的HiveQL语言，使得上层的数据分析人员不用知道太多MapReduce的知识就能对存储于Hdfs中的海量数据进行分析。由于这一特性而收到广泛的欢迎。Hive的整体框架中有一个重要的模块是执行模块...
分类：
其他好文 时间：
2014-07-07 14:17:47
阅读次数：
295
OpenNMS监控windows系统时需要安装snmp客户端，而windows系统已经自带了snmp，下面我们就来安装snmp1.开始→控制面板点击程序打开或关闭Windows功能勾选SNMP复选框，等待一会就会安装完成。计算机右击，选择管理→服务找到SNMP Service双击SNMP Servi...
########################################################################## File Name: monitor.sh# Author: fangtest# mail: fangxuhaha@126.com# Created ...
分类：
系统相关 时间：
2014-07-02 00:38:58
阅读次数：
213
2004年Google发表了一篇非常具有影响力的论文向全世界介绍了MapReduce框架，该框架可以把一个应用程序分解为许多并行计算指令，跨大量的计算节点运行非常巨大的数据集。时至今日，MapReduce已经成为并行分布式计算领域的一个高度流行的基础设施和编程模型，它是Apache Hadoop的基...
分类：
其他好文 时间：
2014-07-01 00:21:41
阅读次数：
320
echo "======================================welcome==============================================" echo "==== ======" echo "==== 此脚本是用来监控weblogic的doma...
分类：
Web程序 时间：
2014-06-30 23:14:25
阅读次数：
381
全局钩子具体解释监控程序的实现 我们发现一些木马或其它病毒程序经常会将我们的键盘或鼠标的操作消息记录下来然后再将它发到他们指定的地方以实现监听.这样的功能其它是利用了全局钩子将鼠标或键盘消息进行了截取,从而获得了操作的消息.要得到鼠标和键盘的控制权,我们要用SetWindowsHookEx这个函数:...
分类：
其他好文 时间：
2014-06-30 22:13:51
阅读次数：
257
packagecom.yuhui.gd.hadoop.hbase;importjava.util.Iterator;importjava.util.Map;importjava.util.Map.Entry;importjava.util.NavigableMap;importjava.util.Set;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.hbase.HBaseConfiguration;importorg.ap..
分类：
编程语言 时间：
2014-06-29 21:09:00
阅读次数：
453
1准备工具uputty_V0.63.0.0.43510830.exe------》用于连接到Linux服务器uWinscp------》用于将windows与Linux服务器文件互传2操作步骤复制代理至Linux服务器在SCOM安装光盘中，找到Linux服务器代理打开Wincap工具，将用于Linux服务器的SCOM代理，复制到Linux服务器根目录下1域..
分类：
系统相关 时间：
2014-06-29 21:01:51
阅读次数：
3924
