由于对lucene比较感兴趣,本人在网上找了点资料,终于成功地用lucene对mysql数据库进行索引创建并成功搜索,先总结如下: 首先介绍一个jdbc工具类,用于得到Connection对象:[java]view plaincopyimportjava.sql.Connection;import....
分类:
数据库 时间:
2014-11-19 10:40:02
阅读次数:
225
Solr配置Solr的主要功能是全文检索,该功能分为两个过程:创建索引和对索引进行搜索;在创建索引之前,需要重点关注两个配置文件:SOLR_HOME/collection1/conf/schema.xml(定义Document的结构类似定义DB的表结构) & solrconfig.xml(solr运...
分类:
Web程序 时间:
2014-11-19 10:36:23
阅读次数:
241
Solr4.8.0源码分析(16)之SolrCloud索引深入(3) 前面两节学习了SolrCloud索引过程以及索引链的前两步,LogUpdateProcessorFactory和DistributedUpdateProcessor。本节将详细介绍了索引链的第三步DirectUpdateHan.....
分类:
其他好文 时间:
2014-11-19 07:04:23
阅读次数:
277
hadoop挂载多硬盘http://blog.sina.com.cn/s/blog_b88e09dd01013rd4.htmlUbuntu - 硬盘分区、格式化、自动挂载配置 | Hard disk add new partition, format, auto mount in ubuntu ht...
分类:
其他好文 时间:
2014-11-19 00:12:12
阅读次数:
359
https://github.com/lamfire/jspphttp://blog.csdn.net/nomousewch/article/category/823687http://my.oschina.net/pzh0819/blog/113946http://www.cnblogs.com/...
分类:
Web程序 时间:
2014-11-18 23:45:21
阅读次数:
298
商业协作和项目管理平台-TeamLab网络视频会议软件-VMukti驰骋工作流程引擎-ccflow【免费】正则表达式测试工具-Regex-TesterWindows-Phone-7-SDKExcel-读写组件-ExcelLibrary.NET集成开发环境-MonoDevelop电话软交换机-Free...
分类:
Windows程序 时间:
2014-11-18 00:11:37
阅读次数:
2775
TokenStream: 分词器做好处理之后得到的一个流。这个流中存储了分词的各种信息,可以通过TokenStream有效的获取到分词单元。
以下是把文件流转换成分词流(TokenStream)的过程
首先,通过Tokenizer来进行分词,不同分词器有着不同的Tokenzier,Tokenzier分完词后,通过TokenFilter对已经分好词的数据进行过滤,比如停止词。过滤完之后,把所有的数据组合成一个TokenStream;...
分类:
Web程序 时间:
2014-11-17 22:56:37
阅读次数:
458
本文就spark-cassandra-connector的一些实现细节进行探讨,主要集中于如何快速将大量的数据从cassandra中读取到本地内存或磁盘。
分类:
Web程序 时间:
2014-11-17 22:33:25
阅读次数:
492
虽然最近业绩有所下滑,也出现了一些技术故障,但Digg作为首屈一指的社会化新闻网站,其背后的技术还是值得一探,Digg工程师Dave Beckett在今年4月份写一篇名为《How Digg is Built》的文章,非常系统地将Digg背后的技术展现给大家,非常值得一看。一、Digg提供的服务一个社...
分类:
其他好文 时间:
2014-11-17 21:04:29
阅读次数:
202
基于lucene的分页有两种:
lucene3.5之前分页提供的方式为再查询方式(每次查询全部记录,然后取其中部分记录,这种方式用的最多),lucene官方的解释:由于我们的速度足够快。处理海量数据时,内存容易内存溢出。
lucene3.5以后提供一个searchAfter,这个是在特大数据量采用(亿级数据量),速度相对慢一点,像google搜索图片的时候,点击更多,然后再出来一批。这种方式就是把数据保存在缓存里面。然后再去取。
以下是再查询部分代码:...
分类:
Web程序 时间:
2014-11-17 15:55:25
阅读次数:
189