搜索引擎获取并存储海量的网页相关信息，不需要实时计算，可看做搜索引擎的后台计算系统。搜索引擎的最重要目的是为用户提供准确全面的搜索结果。 当搜索引擎接收到用户的查询词后，首先需要对查询词进行分析，希望能够结合查询词和用户信息来正确推导用户的真正搜索结果，如果能够在缓存系统找到满足用户需求的信息，则可 ...
分类：
其他好文 时间：
2018-02-13 16:40:24
阅读次数：
181
storm是Twitter开发的一个开源的分布式实时计算系统，可以简单可靠的处理大量的数据流。storm有很多的应用场景，如实时分析，在线机器学习，持续计算，分布式RPC，ETL等等。storm支持水平扩展，具有很高的容错性，保证每个消息都能得快速的得到处理(在一个小的集群中，每个节点每秒可以处理数 ...
分类：
其他好文 时间：
2018-02-13 10:35:21
阅读次数：
158
1、学习背景 之前做一个根据wifi点位实时计算个人的轨迹的应用，使用Hbase, 尽管做了些优化，但是在计算性能上仍然不能满足需求，当时考虑是否可以用分布内存计算框架来解决，不过项目后来由于数据来源问题搁置也就没再继续，但是ignite进入视野，我想这么牛的东西一定得学学^_^。 2、学习资源 中 ...
分类：
其他好文 时间：
2018-02-05 00:29:05
阅读次数：
1318
===>?什么是?Storm?????????-->?Twitter将Storm正式开源了，这是一个分布式的、容错的实时计算系统,遵循 Eclipse Public License 1.0。? ? ????-->
分类：
其他好文 时间：
2018-02-01 17:20:43
阅读次数：
228
Why use Storm? Apache Storm是一个免费的开源的分布式实时计算系统。Storm使得可靠的实时处理无边界的数据量变得很容易，就如同Hadoop做批处理那样。Storm很简单，可以用任意的编程语言。 Storm有许多使用案例：实时分析、在线机器学习、持续的计算、分布式RPC、ET ...
分类：
其他好文 时间：
2018-01-30 19:39:00
阅读次数：
142
实时计算部分参考自博文： 1. "实时用户标签生成系统设计" 用户标签系统的用途 用户分类，精准营销。 标签的定义 我司常用的标签有：新用户、老用户、流失用户、活跃用户等。此外，还可以根据用户以往行为，如投诉、订单取消、查看报价等，为用户打上相应的标签。标签系统提供了从多维度进行用户分类的方法 。在 ...
分类：
其他好文 时间：
2018-01-29 21:33:44
阅读次数：
250
1 流式计算 流式计算：数据实时产生、实时传输、实时计算、实时展示 代表技术：Flume实时获取数据、Kafka/metaq实时数据存储、Storm/JStorm实时数据计算、Redis实时结果缓存、持久化存储(mysql)。 一句话总结：将源源不断产生的数据实时收集并实时计算，尽可能快的得到计算结 ...
分类：
其他好文 时间：
2018-01-24 12:41:12
阅读次数：
231
storm是一个分布式实时计算引擎 storm/Jstorm的安装、配置、启动差点儿一模一样 storm是twitter开源的 storm的特点 storm支持热部署，即时上限或下线app 能够在storm上使用各种编程语言如clojure、java、ruby、python等 本地模式：storm有 ...
分类：
其他好文 时间：
2018-01-17 21:59:04
阅读次数：
215
项目：https://github.com/ccyinghua/vue-node-mongodb-project/blob/master/07-shoppingCart.md 实时计算属性的computed功能，实时计算的是属性，只不过是函数的写法，data里面就不用再声明了。computed里面可 ...
分类：
其他好文 时间：
2018-01-12 00:04:16
阅读次数：
466
Kafka Stream-Spark Streaming-Storm流式计算框架比较选型 Kafka Stream-Spark Streaming-Storm流式计算框架比较选型 elasticsearch-headElasticsearch-sql clientNLPchina/elasticse ...
分类：
其他好文 时间：
2018-01-11 15:23:51
阅读次数：
926
