流程:1.X端发送数据到kafka(如web端发送的订单数据)。2.storm从kafka获取数据进行分析。 a.storm与kafka整合,获得数据——Sport b.storm对数据进行分析——Bolt 3.结果保存和显示(或者传给别人)。 a.将结果保存到DB(Hbase,redi...
分类:
其他好文 时间:
2014-10-25 17:13:49
阅读次数:
220
/*ping program for learning IP protocol author: jeff date: 2014/10/25*/#include #include #include #include #include static int ICMP_create();...
分类:
其他好文 时间:
2014-10-25 17:12:02
阅读次数:
209
之前写了2篇文章讲述了Storm的基本知识。最近也学习了Storm的高级属性了,单纯粹还是属于了解的状态。我就简单介绍几个比较简单的属性。
1.DRPC。简称分布式RPC,模型图:
用户直接面对的是DRPC Server,避开了所有的拓扑逻辑,Storm提供了一个名为LinearDRPCTopologyBuilder的线性拓扑构建器,他把DRPC所做的几乎所有步骤都自动...
分类:
其他好文 时间:
2014-10-25 09:21:51
阅读次数:
200
最近研究Storm的Stream Grouping的时候,对Field Grouping和Shuffle Grouping理解不是很透彻。去看WordCountTopology也不怎么理解,后来脑洞一开,加了一行代码再次运行,彻底顿悟。只能说自己对Storm的基本概念还是没吃透啊。...
分类:
其他好文 时间:
2014-10-25 00:52:08
阅读次数:
224
在storm中的Bolt中可以处理完成逻辑后,向后面的Blot继续发送消息。可以发送多个不同的消息,如:collector.emit("update-delivered-status",new Values(emailDeliverStatus)); collector.emit("save-...
分类:
其他好文 时间:
2014-10-24 12:44:07
阅读次数:
313
Machine-Learning
Maestro Michael Jordan on the Delusions of Big Data and Other Huge Engineering Efforts...
分类:
系统相关 时间:
2014-10-24 11:05:49
阅读次数:
206
https://github.com/josephmisiti/awesome-machine-learning/blob/master/books.mdMachine-Learning / Data MiningAn Introduction To Statistical Learning - B...
分类:
系统相关 时间:
2014-10-24 10:28:36
阅读次数:
331
Bizon the Champion isn't just charming, he also is very smart.
While some of us were learning the multiplication table, Bizon the Champion had fun in his own manner. Bizon the Champion painted an n...
分类:
其他好文 时间:
2014-10-23 08:14:55
阅读次数:
139
这一次想把标点符号的英语表达总结一下,这些单词很重要但容易被我们忽视。以我的经验,还是多认识几个,以备不时之需。下面从“标点符号”开始:punctuation[英][?p??kt?u?e??n][美][?p??kt?u?e??n]n.标点法; 标点符号; 标点符号的使用; 点标点; ampersand[英][?æmp?sænd][美][?æmp?rsænd]n."&"的记号名称,and符; 源码中...
分类:
移动开发 时间:
2014-10-22 22:06:12
阅读次数:
258
上篇文章本人简单的介绍了Storm的起源,今天本人又继续学习了Storm的基本的一些知识,基本了解了他的基本用法,还好,不算太难,如果大家了解了Hadoop的MapReduce模型的话,看这个也是非常类似的。在了解Storm的原型时,首先了解一些概念。
1.Tuple(元组),作为消息传递的基本单元,元组中的字段可以是任何类型的对象。元组会用于后面提到的Bolt方法的execute方法。
2....
分类:
其他好文 时间:
2014-10-22 11:10:34
阅读次数:
212