码迷,mamicode.com
首页 >  
搜索关键字:storm topology    ( 1867个结果
Twitter Storm如何保证消息不丢失
storm保证从spout发出的每个tuple都会被完全处理。这篇文章介绍storm是怎么做到这个保证的,以及我们使用者怎么做才能充分利用storm的可靠性特点。一个tuple被”完全处理”是什么意思?就如同蝴蝶效应一样,从spout发射的一个tuple可以引起其它成千上万个tuple因它而产生, ...
分类:其他好文   时间:2015-08-29 16:52:03    阅读次数:107
Twitter Storm: storm的一些常见模式
这篇文章列举出了storm topology里面的一些常见模式:流聚合(stream join)批处理(Batching)BasicBolt内存内缓存 + fields grouping 组合计算top N用TimeCacheMap来高效地保存一个最近被更新的对象的缓存分布式RPC:Coordina...
分类:其他好文   时间:2015-08-29 16:47:24    阅读次数:168
zoj 2587 Unique Attack 【判断最小割是否唯一】
Unique Attack Time Limit: 5 Seconds      Memory Limit: 32768 KB N supercomputers in the United States of Antarctica are connected into a network. A network has a simple topology: M different pai...
分类:其他好文   时间:2015-08-28 13:29:06    阅读次数:140
大数据处理时用到maven的repository
由于做数据处理时,经常遇到maven 下载依赖包错误,下面我将自己下载好的repository 分享下 里边包含:Hadoop ,storm ,sprk ,kafka ,等 压缩后500多M。 http://pan.baidu.com/s/1pJN2ScV 如有问题请联系: chaoren399@1...
分类:其他好文   时间:2015-08-28 00:36:13    阅读次数:113
大数据架构:flume-ng+Kafka+Storm+HDFS 实时系统组合
个人观点:大数据我们都知道hadoop,但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理,hadoop还是比较适合的,但是对于实 时性比较强的,数据量比较大的,我们可以采用Storm,那么Storm和什么技术搭配,才能够做一个适合自己的项目。下面给大家可以参考。可以带着下面问题来阅读...
分类:Web程序   时间:2015-08-27 18:32:29    阅读次数:302
Storm-0.9.0.1安装部署 指导
可以带着下面问题来阅读本文章:1.Storm只支持什么传输2.通过什么配置,可以更改Zookeeper默认端口3.Storm UI必须和Storm Nimbus部署在同一台机器上,UI无法正常工作为什么2.Storm-0.9.0.1大概经过几个步骤Twitter Storm更新0.9.0.1之后,安...
分类:其他好文   时间:2015-08-27 18:26:13    阅读次数:182
storm简介
伴随着信息科技日新月异的发展,信息呈现出爆发式的膨胀,人们获取信息的途径也更加多样、更加便捷,同时对于信息的时效性要求也越来越高。举个搜索场景中的例子,当一个卖家发布了一条宝贝信息时,他希望的当然是这个宝贝马上就可以被卖家搜索出来、点击、购买啦,相反,如果这个宝贝要等到第二天或者更久才可以被搜出来,估计这个大哥就要骂娘了。再举一个推荐的例子,如果用户昨天在淘宝上买了一双袜子,今天想买一副泳镜去游泳...
分类:其他好文   时间:2015-08-25 21:51:31    阅读次数:150
写个脚本列出neutron的ovs的topology。
运行结果如下:$ ./nova-ifinfo a7026868-407c-4c54-bb8f-a68623d7e13fvm name is: instance-00000035 # 查找VM的名字qemu pid is: 43146, iface host fd: 28, iface fd: 26,...
分类:其他好文   时间:2015-08-25 21:07:21    阅读次数:255
实时计算框架之二:Storm之入门实例
2 Storm的基本组成部分 经过前一部分,我们可以搭建起Storm的执行环境,并可以通过浏览器打开对应的管理页面。如果已经成功的到达这一步,那么恭喜你,Storm的框架已经搭建成功,接下来就是Storm具体该如何应用了...
分类:其他好文   时间:2015-08-19 17:54:44    阅读次数:196
hadoop工作平台梳理
文章http://blog.csdn.net/lili72/article/details/41130743 lili72数据平台: 一、 hadoop平台:Hbase。hive,storm,spark 1) 部署hadoop到多台机器,调整配置參数,保证正常...
分类:其他好文   时间:2015-08-19 11:06:48    阅读次数:141
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!