原文网址:http://www.csdn.net/article/1970-01-01/28246611.Hadoop在百度得使用 Hadoop在百度的应用领域主要包括:大数据挖掘与分析,日志分析平台,数据仓库系统,用户行为分析系统,广告平台等存储与计算服务。 目前百度的Hadoop集群规模已经超过...
分类:
其他好文 时间:
2015-11-18 16:21:14
阅读次数:
192
平台支撑ES支持在不同的平台上运行,下面这幅图中,对号标记的是经过测试的平台,其他的也可以运行,但是可能会出现BUG。下载与安装在官网下载地址就可以进行下载。然后解压,进入bin目录,运行下面的命令:$ bin/elasticsearch如果想要以守护进程的方式运行,可以添加-d参数:$ bin/e...
分类:
其他好文 时间:
2015-11-17 00:02:50
阅读次数:
140
ES即简单又复杂,你可以快速的实现全文检索,又需要了解复杂的REST API。本篇就通过一些简单的搜索命令,帮助你理解ES的相关应用。虽然不能让你理解ES的原理设计,但是可以帮助你理解ES,探寻更多的特性。其他相关的内容参考:Elasticsearch官方文档翻译样例数据为了更好的使用和理解ES,没...
分类:
其他好文 时间:
2015-11-16 00:39:35
阅读次数:
228
好久没写博文了,最近一直加班做项目,正在做搜索方面的工作,因此测试了一下es,经过无数次失败,终于成功安装了es+ik从网上找了无数的安装方法都是一样,安装不成功es2.0安装es官方网站下载es2,解压后即可执行,可暂时不配置,本人只修改了数据和日志的路径下载ikhttps://gi..
分类:
其他好文 时间:
2015-11-14 07:39:34
阅读次数:
234
ES支持近实时的索引、更新、查询、删除文档,近实时就意味着刚刚索引的数据需要1秒钟后才能搜索到,这也是与传统的SQL数据库不同的地方。更多的ES文档资料参考:Elasticsearch官方文档翻译索引/替换文档之前已经试过如何索引一个文档了,这里再复习一下:curl -XPUT 'localhost...
分类:
其他好文 时间:
2015-11-14 01:01:05
阅读次数:
324
由于项目更新了一大版本,过不了多久就会进行一次SQL语句查询的优化任务,由运维部分导出一份历史查询SQL语句日志给开发部门做优化分析工作。以前写过一个日志分析的工具,可以不是很好,所以最近又花了几天时间,完善了这个工具。下面,我来说一下,开发历程:一、任务分析:1、工具界面:2、具体需求:分类统.....
分类:
数据库 时间:
2015-11-13 18:56:20
阅读次数:
350
https://www.elastic.co/guide/en/elasticsearch/reference/1.7/indices-templates.html 一、 索引模板,定义模板,当新索引创建时,自动匹配,并应用定义的模板 新增索引模板(index templates) 我们新建一个索...
分类:
其他好文 时间:
2015-11-13 17:15:32
阅读次数:
736
https://www.elastic.co/guide/en/elasticsearch/reference/1.7/indices-aliases.html 一、 Elasticsearch的别名,就类似数据库的视图。 创建别名: 我们为索引my_index创建一个别名my_index_alias,这样我们对...
分类:
其他好文 时间:
2015-11-13 15:58:46
阅读次数:
288
日志的分析和监控在系统开发中占非常重要的地位,系统越复杂,日志的分析和监控就越重要,常见的需求有: 根据关键字查询日志详情 监控系统的运行状况 统计分析,比如接口的调用次数、执行时间、成功率等 异常数据...
分类:
其他好文 时间:
2015-11-13 11:53:29
阅读次数:
571
相比于range聚合,date range就是范围可以由时间来指定。例如:{ "aggs":{ "range":{ "date_range":{ "field":"date", "format":"...
分类:
其他好文 时间:
2015-11-12 23:34:54
阅读次数:
489