机房断电,所有服务器的重启了,在重新启动storm,nimbus和ui都成功启动了,supervisor总是启动失败,报什么EOF的错误,百度了很久,说在conf/storm.yaml文件中,删除配置的storm.local.dir目录下的所有文件,我认为nimbus和ui都启动成功,就只删除了supervisor的文件夹,结果..
分类:
其他好文 时间:
2015-03-19 16:31:48
阅读次数:
2886
微软向Linux用户提供Hadoop on Azure服务 目前HDInsight支持的唯一Linux版本是Ubuntu(在虚拟机中),是由Canonical提供支持的。微软现在已经开始提供Storm for Azure HDInsight。Storm是一种开源的流分析平台,已经从2014年10...
分类:
其他好文 时间:
2015-03-17 10:12:00
阅读次数:
196
1.你做的页面在哪些流览器测试过?这些浏览器的内核分别是什么? IE: trident内核 Firefox:gecko内核 Safari:webkit内核 Opera:以前是presto内核,Opera现已改用Google Chrome的Blink内核 Chrome:Blink(基于webkit,G...
分类:
其他好文 时间:
2015-03-16 21:05:11
阅读次数:
179
KafkaSpout的核心逻辑都是由PartitionManager来实现的。但是这个类实现时候需要考虑的东西有些多,0.92至0.93,至当前(2015.3.14)的master一直在变化。在这里,先分析一下最近的发布版0.93里的逻辑。也提出一些问题,希望以后Apache Storm会把这个类实...
分类:
Web程序 时间:
2015-03-14 21:41:36
阅读次数:
4178
使用flume收集数据,将数据传递给kafka和hdfs,kafka上的数据可以使用storm构建实时计算,而hdfs上的数据,经过MR处理之后可以导入hive中进行处理。 环境:hadoop1.2.1,hive 0.13.1,maven 3.2.5,flume 1.4,kafka 0.7.2,ec...
分类:
Web程序 时间:
2015-03-14 18:17:55
阅读次数:
4961
手机端://判断浏览器
var browser = {
versions : function() {
var u = navigator.userAgent, app = navigator.appVersion;
return {
trident : u.indexOf('Trident') > -1, //IE内核
presto : u.indexOf('P...
分类:
移动开发 时间:
2015-03-13 12:49:42
阅读次数:
442
在日常开发中我们经常使用maven,但仓库中有时并未包含我们使用的jar文件,比如oracle的jdbc驱动,这时就需要我们手工安装才能正常进行开发,在此记录下这个简单过程:
1、首先要有一个oracle的jdbc驱动jar包
2、使用maven命令行安装该jar包,命令如下:
3、在pom文件中引入该依赖...
分类:
编程语言 时间:
2015-03-12 22:33:59
阅读次数:
309
1. Storm集群组件Storm集群中包含两类节点:主控节点(Master Node)和工作节点(Work Node)。其分别对应的角色如下:主控节点(Master Node)上运行一个被称为Nimbus的后台程序,它负责在Storm集群内分发代码,分配任务给工作机器,并且负责监控集群运行状态和监...
分类:
其他好文 时间:
2015-03-12 19:06:50
阅读次数:
171
Storm流计算从入门到精通之技术篇(高并发策略、批处理事务、Trident精解、运维监控、企业场景)课程讲师:Cloudy课程分类:大数据适合人群:初级课时数量:28课时用到技术:Storm集群、Zookeeper集群等涉及项目:网站PV、UV案例实战、其他案例咨询qq:1840215592课程亮...
分类:
其他好文 时间:
2015-03-12 18:38:12
阅读次数:
311
storm的DRPC模式的作用是实现从远程调用storm集群的计算资源,而不需要连接到集群的某一个节点。OK。那么storm实现DRPC主要是使用LinearDRPCTopologyBuilder这个类。下面就先来看看一个简单的例子,它的源码的github上。import backtype.st.....
分类:
其他好文 时间:
2015-03-07 18:39:40
阅读次数:
201