最近，我接到一个任务，具体来说就是： 使用百度来搜索30万关键词，把搜索结果中出现的网站链接全部储存下来。 我们来计算一下，30万关键词，每个关键词百度会给出75个页面，就是2250万个网页的爬虫量。考虑到延时等在内，每秒平均处理一个页面，就需要22500000/(24*3600) = 260天时间 ...
分类：
其他好文 时间：
2017-03-08 19:01:51
阅读次数：
183
来源：GavinZhang（ @GavinBuildSomething ） guoze.me/2016/06/26/how-to-google/ 完整匹配 在Google的输入框里，所有的空格都被理解为加号。如果你输入的是mysql foreign key，那么返回的搜索结果里也许既有mysql存在 ...
分类：
其他好文 时间：
2017-03-04 22:28:03
阅读次数：
187
为什么要设置相关度 设置相关读可以人为的影响搜索结果的排序，通过设置某一个域的boost，可以在同时出现多条匹配结果时提升排名。通过设置boost影响打分结果，boost是一个加权值（默认加权值为1.0f），它可以影响权重的计算。 设置相关度的时机 1.建立索引时设置 提升某个Document的权重... ...
分类：
其他好文 时间：
2017-02-28 13:41:00
阅读次数：
193
垂直搜索结果的优化包括对搜索结果的控制和排序优化两方面，其中排序又是重中之重。本文将全面深入探讨垂直搜索的排序模型的演化过程，最后推导出BM25模型的排序。然后将演示如何修改lucene的排序源代码，下一篇将深入解读目前比较火热的机器学习排序在垂直搜索中的应用。文章的结构如下： 一、VSM模型简单介 ...
分类：
编程语言 时间：
2017-02-21 01:12:10
阅读次数：
6880
IntelliJ Idea 常用快捷键列表 Ctrl+Shift + Enter，语句完成“！”，否定完成，输入表达式时按 “！”键Ctrl+E，最近的文件Ctrl+Shift+E，最近更改的文件Shift+Click，可以关闭文件Ctrl+[ OR ]，可以跑到大括号的开头与结尾Ctrl+F12， ...
分类：
其他好文 时间：
2017-02-18 00:35:29
阅读次数：
196
1、概述本篇文档主要介绍IMX6UL平台上基于SylixOS集成开发环境中GIC通用中断控制器的实现流程和方法。2、GIC控制器基地址获取GIC控制器基地址通过调用armPrivatePeriphBaseGet函数获得。如图2.1所示，Ctrl+h局搜索armPrivatePeriphBaseGet函数，搜索结果如图2.2所示。图2.1全局..
分类：
其他好文 时间：
2017-02-15 22:41:52
阅读次数：
267
go语言推出有几年了，似乎不温不火。但是在中国范围内，确实被关注的一塌糊涂。这是2017年2月份TIOBE出的编程语言排名：在拉勾网上搜索go的职位，结果有119个(2017年2月14日搜索结果)，似...
分类：
编程语言 时间：
2017-02-14 19:31:57
阅读次数：
799
现在让我们来看看前缀匹配能够如何帮助全文搜索。用户已经习惯于在完成输入之前就看到搜索结果了 - 这被称为即时搜索(Instant Search, 或者Search-as-you-type)。这不仅让用户能够在更短的时间内看到搜索结果，也能够引导他们得到真实存在于我们的索引中的结果。 比如，如果用户输 ...
分类：
其他好文 时间：
2017-02-13 23:49:07
阅读次数：
760
Vim命令合集 Vim命令合集 Vim命令合集 命令历史 以:和/开头的命令都有历史纪录，可以首先键入:或/然后按上下箭头来选择某个历史命令。 启动vim 在命令行窗口中输入以下命令即可 vim 直接启动vim vim filename 打开vim并创建名为filename的文件 文件命令 打开单个 ...
分类：
系统相关 时间：
2017-02-11 20:53:22
阅读次数：
233
