码迷,mamicode.com
首页 >  
搜索关键字:storm trident    ( 2030个结果
Storm 配置图文解析
Storm 配置图文解析. 一个worker进程(process)会产生N个线程(executor),那么并行度(parallelism)就是所有线程的数目。setNumWorkers 任务(task)是线程执行的工作队列,线程的任务数说明线程的吞吐能力。一个线程的各个任务之间并不是并发的。setNumTasks 线程(executor)是执行任务的上下文环境。...
分类:其他好文   时间:2015-07-01 12:16:37    阅读次数:128
分布式系统设计系列 -- 总结
在今天的“大数据”、“云平台”背景下,这些尖端技术,从一个非常多平台技术派生点,Nosql、Hadoop、Storm和其他新兴。技术落后,这些华丽是分不开的,其实无处不在“分散式”虽然这做了一个很长的时间,但是大数据、云计算技术与火。玩笑说。假设不懂一些“分布式"下的技术和原理的,会有点不好...
分类:其他好文   时间:2015-07-01 09:57:02    阅读次数:100
Storm
http://www.quora.com/Are-there-any-tutorials-examples-of-using-Apache-Storm-for-event-log-monitoringhttp://blog.mmlac.com/how-to-pre-process-logs-with...
分类:其他好文   时间:2015-07-01 00:58:40    阅读次数:165
storm ui显示supervisor个数与实际不符的解决
现象:启动了多个supervisor,单在ui上只显示一个解决方法:清空"storm.local.dir"对应的目录中的内容,或者重新指定一个目录,如:#stromlocaldirstorm.local.dir:"/var/wd/storm"
分类:其他好文   时间:2015-06-30 18:43:01    阅读次数:102
trident介绍
(一)理论基础 更多理论以后再补充,或者参考书籍 1、trident是什么? Trident is a high-level abstraction for doing realtime computing on top of Storm. It allows you to seamlessly intermix high throughput (millions of messages p...
分类:其他好文   时间:2015-06-30 16:24:58    阅读次数:168
spark、storm与Hadoop
1. Storm是什么,怎么做,如何做的更好?Storm是一个开源的分布式实时计算系统,它可以简单、可靠地处理大量的数据流。Storm有很多应用场景,如实时分析、在线机器学习、持续计算、分布式RPC、ETL,等等。Storm支持水平扩展,具有高容错性,保证每个消息都会得到处理,而且处理速度很快(在一...
分类:其他好文   时间:2015-06-28 21:25:04    阅读次数:233
storm安装与配置
storm依赖的软件 ZeroMQ 2.1.7 是一个消息处理队列库,可在多个线程、内核和主机盒之间弹性伸缩。 JZMQ 底层消息队列 jdk 1.6 PythonZeroMQ安装: wget http://download.zeromq.org/zeromq-2.1.7.tar.gztar...
分类:其他好文   时间:2015-06-27 01:16:42    阅读次数:225
storm遇到问题汇总
storm遇到问题汇总
分类:其他好文   时间:2015-06-24 09:14:46    阅读次数:186
Storm InvalidTopologyException: null
Storm InvalidTopologyException: null
分类:其他好文   时间:2015-06-24 09:14:29    阅读次数:1200
值得推荐的视频
IT-培训基于Greenplum Hadoop分布式平台的大数据解决方案及商业应用案例剖析Hadoop2.0_YARN_Spark_Storm_Tez技术培训视频教程基于IBM Cognos Report studio技术的商业智能解决方案(广播分发报表、EVENT STUDIO)基于IBM Cog...
分类:其他好文   时间:2015-06-24 08:10:41    阅读次数:172
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!