这个模式所做的事情概括一下就是把多个不同的任务和操作合并到一个计算单元中,从而使云计算应用提高计算资源利用率,降低管理开销和任务之间连接交互的开销。
PS:我这里对后文中所翻译的“计算单元”做个小小的注释,这里的计算单元可以认为是逻辑的运行容器,可以是基于cgroup的各种container,也可以是像Storm中的worker,Spark中的Executor等等。这个模式除了在自己设计分布式系...
分类:
其他好文 时间:
2015-01-25 12:37:47
阅读次数:
333
机器学习的来源和用例:
Machine Learning
- Grew out of work in AI
- New capability for computers
Examples:
- Database mining
Large datasets from growth of automation/web.
E.g., Web click data, medical re...
分类:
系统相关 时间:
2015-01-24 21:27:36
阅读次数:
331
这一节课主要讲述机器学习中应该注意的事项,包括:Occam's Razor、Sampling Bias、Data Snooping....
分类:
其他好文 时间:
2015-01-24 17:23:34
阅读次数:
328
Deep Learning(深度学习)学习笔记整理系列zouxy09@qq.comhttp://blog.csdn.net/zouxy09作者:Zouxyversion 1.0 2013-04-08声明:1)该Deep Learning的学习系列是整理自网上非常大牛和机器学习专家所无私奉献的资料的。...
分类:
其他好文 时间:
2015-01-24 17:18:05
阅读次数:
291
Stanford机器学习课程笔记——单变量线性回归和梯度下降法
1. 问题引入
单变量线性回归就是我们通常说的线性模型,而且其中只有一个自变量x,一个因变量y的那种最简单直接的模型。模型的数学表达式为y=ax+b那种,形式上比较简单。Stanford的机器学习课程引入这个问题也想让我们亲近一下machine learning这个领域吧~吴恩达大神通过一个房屋交易的问...
分类:
其他好文 时间:
2015-01-23 13:31:42
阅读次数:
174
Preface:工欲善其事,必先利其器。找deep learning资料时,发现有个python包:theano。便开始着手学习,当然,最好的资料还是官网文档了,没怎么找到比较好的中文文档,那就记录下来。theano官网教程。
deep learning tutorial:http://deeplearning.net/tutorial/。
Theano install:http://deep...
分类:
编程语言 时间:
2015-01-23 11:11:43
阅读次数:
268
TickTuple可以满足每隔一段时间发送tuple,"__system" component会定时往task发送 "__tick" stream的tuple,发送频率由TOPOLOGY_TICK_TUPLE_FREQ_SECS来配置, 可以在default.ymal里面配置,也可以在代码里面通过g...
分类:
其他好文 时间:
2015-01-23 11:08:06
阅读次数:
220
Data Warehousing and Business IntelligenceDifferences Between Data Warehousing and BusinessIntelligenceFiled under:Business Intelligence,Data Warehous...
分类:
其他好文 时间:
2015-01-22 23:09:10
阅读次数:
481
最近在使用storm做一个实时计算的项目,Spout需要从 KAFKA 集群中读取数据,为了提高开发效率,直接使用了Storm提供的KAFKA插件。今天抽空看了一下KafkaSpout的源码,记录下心得体会。 KafkaSpout基于kafka.javaapi.consumer.Simpl...
分类:
Web程序 时间:
2015-01-22 12:47:14
阅读次数:
496
一个topology的启动包括了三个步骤 1)创建TopologyBuilder,设置输入源,输出源 2)获取config 3)提交topology(这里不考虑LocalCluster本地模式) 以storm.starter的ExclamationTopology为例:public static v...
分类:
其他好文 时间:
2015-01-22 12:46:55
阅读次数:
202