这几天测试确认系统的订单大库查询,发现查询很慢,但是都增加了相应的索引,但是依然很慢,查询经常请求超时,涉及的数据库是order-store的order-index表(目前是直接通过和数据库交互的方式去查询的,没有用到搜索引擎)。经过排查,发现是数据迁移,迁移进来了300多万的数据,拖慢了查询的速度...
分类:
数据库 时间:
2014-05-14 10:41:07
阅读次数:
362
我喜欢看武侠电影,尤其的70-80年代的邵氏电影,在这个期间,邵氏公司将金庸和古老很多小说都改拍成了电影,可以说,看这些电影是一种享受,真的!对于现实中的IT世界,也像是一个江湖,当你掌握了一些技能后,就可以驰骋江湖了,你当然可以成功小李飞刀,也可以成功楚香帅,当然,在成为他们之前,你必须要掌握相关...
分类:
其他好文 时间:
2014-05-14 07:39:27
阅读次数:
306
Apache Avro? 1.7.6
SpecificationIntroductionSchema DeclarationPrimitive TypesComplex
TypesRecordsEnumsArraysMapsUnionsFixedNamesAliasesData Serializat...
分类:
其他好文 时间:
2014-05-14 07:18:56
阅读次数:
345
想ES中存储数据,需要index——存储数据的地方,实际上,index就是一个指向若干物理shard的逻辑命名空间。shard就是更底层的工作单元,每个shard是一个Lucene的实例,每个shard在其控制范围内都是一个完整的搜索引擎。我们的文档被存储,并且被index到shard,但是应用程序...
分类:
其他好文 时间:
2014-05-13 19:13:16
阅读次数:
289
走上了程序员这条道路,必须了解大量的技术体系,程序是一个开源的世界,这是一种幸运也是一种不幸,在能无偿了解这么多知识的同时,我们也必须了解如此大量的知识才能成为合格的程序员。...
分类:
编程语言 时间:
2014-05-11 05:09:51
阅读次数:
331
请批判性的学习,欢迎大牛指正错误1、有关PHP字符串的说法,不对的是:C(编码方式不同,substr()操作中文的时候会乱码)A、如果一个脚本的编码是
ISO-8859-1,则其中的字符串也会被编码为 ISO-8859-1。B、PHP的字符串在内部是字节组成的数组,用花括号访问或修改字符串对多字节字...
分类:
Web程序 时间:
2014-05-10 22:25:48
阅读次数:
494
一、概述分表是个目前算是比较炒的比较流行的概念,特别是在大负载的情况下,分表是一个良好分散数据库压力的好方法。首先要了解为什么要分表,分表的好处是什么。我们先来大概了解以下一个数据库执行SQL的过程:接收到SQL
–> 放入SQL执行队列 –> 使用分析器分解SQL –> 按照分析结果进行数据的提取...
分类:
其他好文 时间:
2014-05-10 07:27:19
阅读次数:
372
Zoie中有个ZoieMergePolicy应该价值不大,这是针对lucene早期版本中merge时不考虑删除的doc占比而做的改进,和LogMergePolicy一样也是只做相邻段的合并,合并时使用...
分类:
其他好文 时间:
2014-05-10 04:43:05
阅读次数:
304
其特点是给定的段列表顺序归并,不像TieredMergePolicy那样按大小排序之后决定。
norm = log(10),levelFloor=log(minMergeSize)/norm,对段列表中的元素,添加level值为log(size)/norm(即使log 10 size)的seg。
从列表位置0开始,取最大的logLevel为maxLevel,levelBottom=(float...
分类:
其他好文 时间:
2014-05-10 03:50:37
阅读次数:
306
Lucene 4.8开始不支持java6了,所以在下次版本升级之前我们要先升级至java7。
我使用1/3的全量索引(7.3G),进行测试,20并发,40万请求:
sun jdk 1.6.0_26 平均响应时间为9.08ms
sun java 7 update 55 平均响应时间为8.29ms
传说中的g1 garbage collector那么高大上,使用G1之...
分类:
编程语言 时间:
2014-05-10 03:29:28
阅读次数:
350