1.Tachyon简介Tachyon是一个高容错的分布式文件系统,允许文件以内存的速度在集群框架中进行可靠的共享,就像Spark和 MapReduce那样。通过利用信息继承,内存侵入,Tachyon获得了高性能。Tachyon工作集文件缓存在内存中,并且让不同的 Jobs/Queries以及框架都能...
分类:
其他好文 时间:
2014-08-27 18:32:08
阅读次数:
454
将Solr和Tomcat结合: 1.在D盘下创建目录?D:\Demos\Solr ?????? 2.解压solr-4.9.0文件,我这里下载的是这个4.9版本,将example文件夹下的solr文件夹中的所有文件(不含solr文件夹本身) 拷贝到D:\Demos\...
Solr调研总结开发类型全文检索相关开发Solr版本4.2文件内容本文介绍solr的功能使用及相关注意事项;主要包括以下内容:环境搭建及调试;两个核心配置文件介绍;维护索引;查询索引,和在查询中可以应用的高亮显示、拼写检查、搜索建议、分组统计、拼音检索等功能的使用方法。版本作者/修改人日期V1.0g...
分类:
其他好文 时间:
2014-08-27 12:34:58
阅读次数:
237
storm操作zookeeper的主要函数都定义在命名空间backtype.storm.cluster中(即cluster.clj文件中)。backtype.storm.cluster定义了两个重要protocol:ClusterState和StormClusterState。clojure中的pr...
分类:
其他好文 时间:
2014-08-26 22:38:32
阅读次数:
354
zk不是使用maven管理的。将zk的src下的代码导入eclipse,lib下的jar包导入工程。QuorumPeerMain类的main方法是入口,启动了zk的server,参数是conf文件的路径,例如:org.apache.zookeeper.server.quorum.QuorumPeer...
分类:
其他好文 时间:
2014-08-26 19:21:56
阅读次数:
152
No live SolrServers available to handle this request ,no servers hosting shard当某一片索引对应的结点全部宕了以后,会报这个异常。"error": { "msg": "no servers hosting shard:...
分类:
其他好文 时间:
2014-08-26 19:03:26
阅读次数:
336
Solr4.8.1和Tomcat7都可以到官方网站去下载,我这里就不多说了,如下图。这里我们首先解压Solr-4.8.1.zip,再解压Tomcat,解压后,再在当前文件夹下建2个文件夹,一个用来放Solr的目录文件的,一个用来放Tomcat要跑起来的solr项目,如下图:将\solr-4.8.1\...
分类:
其他好文 时间:
2014-08-26 17:04:06
阅读次数:
228
Zookeeper是Apache的一个开源项目,在集群管理中十分常用。它的集群搭建也十分简单,只需要简单的配置,集群的各个节点会完成自行通讯,自动选取Leader等。...
分类:
其他好文 时间:
2014-08-26 11:47:46
阅读次数:
262
olr是搜索应用服务器,(像tomcat等服务器一样,可以发布项目,相应客户端请求处理),可以嵌入到tomcat,jetty等服务器上。solr提供了许多对外接口,故我们可以使用solr进行全文搜索开发。当用户向部署在Servlet容器中的solr应用程序发送HTTP请求来启动索引和搜索,solr接受请求,确定试用适当的SolrRequestHandler处理请求,然后通过HTTP的方式返回相应。solr应用程序会解析特定格式的.XML文件创建索引,当用户搜索请求处理后,返回特定格式的数据(默认配置是.XM...
分类:
其他好文 时间:
2014-08-26 00:35:25
阅读次数:
377
一直对zookeeper的应用和原理比较迷糊,今天看一篇文章,讲得很通透,分享如下:场景一有这样一个场景:系统中有大约100w的用户,每个用户平均有3个邮箱账号,每隔5分钟,每个邮箱账需要收取100封邮件,最多3亿份邮件需要下载到服务器中(不含附件和正文)。用20台机器划分计算的压力,从多个不同.....
分类:
其他好文 时间:
2014-08-26 00:13:25
阅读次数:
529