Docker Daemon是Docker架构中运行在后台的守护进程，大致可以分为Docker Server、Engine和Job三部分。Docker Daemon可以认为是通过Docker Server模块接受Docker Client的请求，并在Engine中处理请求，然后根据请求类型，创建出指定的Job并运行，运行过程的作用有以下几种可能：向Docker
Registry获取镜像，通过gr...
分类：
其他好文 时间：
2015-06-11 16:55:01
阅读次数：
134
内置函数
2.1数学函数
返回类型
函数
说明
BIGINT
round(double a)
四舍五入
DOUBLE
round(double a, int d)
小数部分d位之后数字四舍五入，例如round(2...
分类：
其他好文 时间：
2015-06-11 16:54:05
阅读次数：
763
超人学院Hadoop大数据资源分享 Hadoop源码分析完整版http://yunpan.cn/cwpjVnNDSRDs5 9d2d扫一扫超人学院二维码
分类：
其他好文 时间：
2015-06-09 19:41:05
阅读次数：
101
超人学院Hadoop大数据资源分享? ?Hadoop源码分析完整版?http://yunpan.cn/cwpjVnNDSRDs5? ?9d2d 更多精彩内容请关注：http://bbs.superwu.cn 关注超人学院微信二维码：...
分类：
其他好文 时间：
2015-06-09 17:53:29
阅读次数：
177
从前面的图中，我们可以发现Task有很多内部类，并拥有大量类成员变量，这些类配合Task完成相关的工作，如下图。
MapOutputFile管理着Mapper的输出文件，它提供了一系列get方法，用于获取Mapper需要的各种文件，这些文件都存放在一个目录下面。
我们假设传入MapOutputFile的JobID为job_200707121733_0003，TaskID为task...
分类：
其他好文 时间：
2015-06-09 17:21:02
阅读次数：
117
视图
隐含参数和方法也可以定义隐式转换，称作视图。由类型S到类型T的视图由一个函数类型为S=>T或(=>S)=>T的隐含值或一个可以转变为该类型的值定义。
视图在两种情况下应用。
1. 如果表达式e类型为T，且T与表达式的期望类型不一致。这种情况下将会搜索一个隐含的v，v可以应用到e且结果类型与pt一致。搜索的形式类似于隐含参数，隐含作用域类似于T => pt。如果找到了这样一个视图，则表达...
分类：
其他好文 时间：
2015-06-09 17:20:08
阅读次数：
129
提供以下两种实现方式：a继承org.apache.hadoop.hive.ql.exec.UDF类
代码包为:packageorg.apache.hadoop.hive.ql.udf
实现evaluate方法，根据输入参数和返回参数类型，系统自动转换到匹配的方法实现上。
例如：
? UDFTestLength.java:
importorg.apache.had...
分类：
其他好文 时间：
2015-06-09 17:19:18
阅读次数：
122
Stream Grouping定义了一个流在Bolt任务间该如何被切分。这里有Storm提供的6个Stream Grouping类型：
1. 随机分组（Shuffle grouping）：随机分发tuple到Bolt的任务，保证每个任务获得相等数量的tuple。
2. 字段分组（Fields grouping）：根据指定字段分割数据流，并分组。例如，根据“user-id”字段，相同“u...
分类：
其他好文 时间：
2015-06-09 17:18:08
阅读次数：
98
Docker 在Centos 6.5 X64下安装
下载epel
wget http://ftp.sjtu.edu.cn/fedora/epel/6/i386/epel-release-6-8.noarch.rpm
安装epel
rpm -ivh epel-release-6-8.noarch.rpm
安装docker-io
yum -y install docker-io
...
分类：
其他好文 时间：
2015-06-09 17:16:29
阅读次数：
118
（要让集群正常工作至少需要3个主节点，在这里我们要创建6个redis节点，其中三个为主节点，三个为从节点，对应的redis节点的ip和端口对应关系如下）
192.168.1.160:7000
192.168.1.160:7001
192.168.1.160:7002
192.168.1.160:7003
192.168.1.160:7004
192.168.1.16...
分类：
其他好文 时间：
2015-06-09 17:15:01
阅读次数：
165
