从业务发展需求,大数据平台需要使用spark作为机器学习、数据挖掘、实时计算等工作,所以决定使用Cloudera Manager5.2.0版本和CDH5。
以前搭建过Cloudera Manager4.8.2和CDH4,在搭建Cloudera Manager5.2.0版本的时候,发现相应的Service Host Monitor 和 Service Monitor不能配置外部表,刚开是还以为是配置出错,后来才发现应该是新版本的Cloudera的存储改变方式了。查了很多文档,果然发现,新版本中Service ...
分类:
数据库 时间:
2014-11-14 12:39:43
阅读次数:
316
一. Kafka中的相关概念的介绍
Kafka是一个scala实现的分布式消息中间件,其中涉及到的相关概念如下:
Kafka中传递的内容称为message(消息),message 是通过topic(话题)进行分组的 topic 和message 的关系是一对多的关系我们称发布message的进程为producer ,就是说producer生成message>对然...
分类:
其他好文 时间:
2014-11-13 22:37:11
阅读次数:
353
1,ceph fileSystemusing the mounted Ceph FS filesystem当我们部署好ceph store cluster(monitor,metadata,object store daemon)当我们部署好ceph store cluster(monitor,me...
分类:
其他好文 时间:
2014-11-13 20:24:20
阅读次数:
327
出自imysql中文网http://imysql.com/2014/08/30/mysql-faq-howto-monitor-slave-lag.shtml在MySQL复制环境中,我们通常只根据Seconds_Behind_Master的值来判断SLAVE的延迟。这么做大部分情况下尚可接受,但并不...
分类:
数据库 时间:
2014-11-11 20:44:37
阅读次数:
199
Java SE 6 provides an in-depth focus on performance, offering expanded tools for managing and monitoring applications and for diagnosing common proble...
分类:
编程语言 时间:
2014-11-10 21:07:56
阅读次数:
358
PartitionManager算是storm-kafka核心的代码了,主要负责message读取、发送、容错处理等等...
分类:
其他好文 时间:
2014-11-09 22:18:01
阅读次数:
435
1
界面设计中尽量少用粗体.
还有url中的参数不用再加引号,如:
method=registProtocol 不能写成method=‘registProtocol’
2.
Js获取设置一个元素的位置:
var div = document.getElementById("minimapDiv");
div.style.top = div.offset...
分类:
其他好文 时间:
2014-11-09 16:44:45
阅读次数:
203
1
Bootstrap是移动设备优先的。
通过添加.img-responsive class可以让Bootstrap 3中的图片对响应式布局的支持更友好。
使用.col-md-offset-*可以将列偏移到右侧。...
分类:
其他好文 时间:
2014-11-09 15:17:35
阅读次数:
152
详细介绍了Storm-Kafka模块中Config的相关配置信息,就是扫盲的一篇介绍而已...
分类:
其他好文 时间:
2014-11-08 15:19:54
阅读次数:
220
上一节介绍了config的相关信息,这一节说下如何创建一个KafkaSpout而已...
分类:
Web程序 时间:
2014-11-08 15:19:01
阅读次数:
311