dm.fs
参数 dm.fs 可以指定容器的 rootfs 的文件系统,但只支持 ext4/xfs,源码如下 funcNewDeviceSet(root string, doInit bool, options []string) (*DeviceSet, error) {
...
case"dm.fs":
if val !="ext4" && val != "xfs" {...
分类:
其他好文 时间:
2015-06-02 17:54:14
阅读次数:
150
数据库配置db-data-config.xml
这里需要配置数据源,字段,以及取得字段的方法。
当mysql数据库中表结构如下时:
可以这么配置:
url="jdbc:mysql://localhost/test"...
分类:
数据库 时间:
2015-06-02 17:53:24
阅读次数:
413
hbase只支持对gzip的压缩,对lzo压缩支持不好。在io成为系统瓶颈的情况下,一般开启lzo压缩会提高系统的吞吐量。但这需要参考具体的应用场景,即是否值得进行压缩、压缩率是否足够等等。
想要hbase支持lzo压缩,参照以下步骤:
1 首先要让系统支持lzo动态库,安装lzo-2.00以上版本:http://www.oberhumer.com/opensource/lzo/dow...
分类:
其他好文 时间:
2015-06-02 17:52:53
阅读次数:
141
概述: 和众多其它数据库一样,Redis作为NoSQL数据库也同样提供了事务机制。在Redis中,MULTI/EXEC/DISCARD/WATCH这四个命令是我们实现事务的基石。相信对有关系型数据库开发经验的开发者而言这一概念并不陌生,即便如此,我们还是会简要的列出Redis中事务的实现特征:
1). 在事务中的所有命令都将会被串行化的顺序执行,事务执行期间,Redis不会再为其它客户端的请求...
分类:
其他好文 时间:
2015-06-02 17:51:49
阅读次数:
85
hive编程指南---http://yunpan.cn/cwkc5r2hIDj5G (提取码:3b64)
更多精彩内容请关注:http://bbs.superwu.cn
关注超人学院微信二维码:
关注超人学院java免费学习交流群:...
分类:
其他好文 时间:
2015-06-02 17:51:13
阅读次数:
100
我在Twitter上看到了一篇有趣的博文——你可以先看看。如果你懒得上Twitter看,看我转载这篇的就行了。
有一天我和我的朋友Simone一起喝咖啡,期间我们聊起一些工作上的事情。我们俩都管理着一些员工,为了说明给初级职员分派任务时出现的问题,她打了一个绝妙的比方。
这就像你让他们挂一幅画,但他们从来没有干过这样的活。你明白你要做什么——只要让他们这么做就行了。事实上,你认为有...
分类:
其他好文 时间:
2015-06-02 13:27:25
阅读次数:
140
bulk-load的作用是用mapreduce的方式将hdfs上的文件装载到hbase中,对于海量数据装载入hbase非常有用,参考http://hbase.apache.org/docs/r0.89.20100621/bulk-loads.html:hbase提供了现成的程序将hdfs上的文件导入hbase,即bulk-load方式。它包括两个步骤(也可以一次完成):..
分类:
其他好文 时间:
2015-06-01 20:41:59
阅读次数:
147
一、请求应答协议和RTT:Redis是一种典型的基于C/S模型的TCP服务器。在客户端与服务器的通讯过程中,通常都是客户端率先发起请求,服务器在接收到请求后执行相应的任务,最后再将获取的数据或处理结果以应答的方式发送给客户端。在此过程中,客户端都会以阻塞的方式等待服务器..
分类:
其他好文 时间:
2015-06-01 20:41:27
阅读次数:
128
Solr在不修改任务配置的情况下就可以使用查询功能,在web项目中应用可以直接URL进行访问Solr服务器例如:http://localhost:8080/solr/collection1/select?q=*%3A*&wt=xml&indent=true上面的意思就是查询名为collection1的SolrCore的所有内容用xml格式返回并且有缩进。..
分类:
其他好文 时间:
2015-06-01 20:41:03
阅读次数:
153
概要本篇主要阐述在TaskRunner中执行的task其业务逻辑是如何被调用到的,另外试图讲清楚运行着的task其输入的数据从哪获取,处理的结果返回到哪里,如何返回。准备1.spark已经安装完毕2.spark运行在localmode或local-clustermodelocal-clustermodelocal-cluster模式也称为伪分..
分类:
Web程序 时间:
2015-06-01 20:40:37
阅读次数:
130