动态映射(Dynamic Mapping)
当ES在文档中碰到一个以前没见过的字段时,它会利用动态映射来决定该字段的类型,并自动地对该字段添加映射。
有时这正是需要的行为,但有时不是。你或许不知道在以后你的文档中会添加哪些字段,但是你想要它们能够被自动地索引。或许你只是想要忽略它们。或者 - 尤其当你将ES当做主要的数据存储使用时 - 大概你会希望这些未知的字段会抛出异常来提醒你注...
分类:
其他好文 时间:
2014-11-29 11:56:51
阅读次数:
255
今天搭建logsatsh+redis+elasticsearch时出现了问题,经过近一小时排查,终于解决。记录一下。
环境是这样,一台客户端发送数据到位于服务器的redis,服务器端的logstash读redis的数据,存储到elasticsearch中。
初步问题是这样的:在服务器端,没有收到客户端发送过来的日志。
这样就可能有两种问题:一是客户端的logstash没有成功发送数据到red...
分类:
其他好文 时间:
2014-11-27 20:31:10
阅读次数:
185
项目地址:https://github.com/4onni/elasticsearch-analysis-ansjhttps://github.com/laigood/elasticsearch-analysis-ansj安装步骤基本上是按照第一个网页的要求安装的,通过插件的形式.
分类:
其他好文 时间:
2014-11-27 20:12:46
阅读次数:
152
mtools是一组非常好用的mongodb日志分析工具,里面最复杂的命令是mplotqueries,上网查了一下,还没有人翻译过。英文不好,费了好大的劲翻完,翻的不好,但没有办法,我英文水平就这么多~ 原文地址:https://git...
分类:
数据库 时间:
2014-11-27 19:01:04
阅读次数:
499
elasticsearch的资料不少,重复的太多,关键的太少。我根据自己的使用经验,逐步总结一些。希望能帮大家少浪费点时间。
1、如何判断某个索引是否存在?
Client searchClient client; //这里的初始化可以参考其他资料
IndicesExistsRequest request = new IndicesExistsRequestBuilde...
ES从1.2.1升级到1.4.0升级步骤,基本上是按照官网的叙述来完成的,链接是:http://www.elasticsearch.org/guide/en/elasticsearch/reference/current/setup-upgrade.html#_1_0_and_later,参考的内容...
分类:
其他好文 时间:
2014-11-26 20:32:15
阅读次数:
610
回到目录LogParser是微软开发的一个日志分析工具,它是命令行格式的,我们通过这个工具,可以对日志文件进行操作,对于一个几百兆的log文件,使用记事本打开是件很残酷的事,所以,很多情况下,我们都会将大日志文件的内容插入到数据库中,这样有利于我们更好的去分析系统的日志。脚本中心给它的定义Log P...
分类:
数据库 时间:
2014-11-26 15:43:21
阅读次数:
151
根对象(Root Object)
映射的最顶层被称为根对象。它包含了:
属性区域(Properties Section),列举了文档中包含的每个字段的映射信息。各种元数据(Metadata)字段,它们都以_开头,比如_type,_id,_source。控制用于新字段的动态探测(Dynamic Detection)的设置,如analyzer,dynamic_date_formats和dy...
分类:
其他好文 时间:
2014-11-26 11:24:04
阅读次数:
267
如何使用日志分析工具Piwik服务器日志分析>如何使用日志分析工具本页解释了如何用Piwik日志分析工具将服务器日志导入到Piwik系统要求如何:使用默认参数运行日志文件分析脚本如何:导入其他数据包括机器人、静态文件、HTTP错误报告如何:排除特定的记录系统要求安装或升级Pi..
分类:
其他好文 时间:
2014-11-25 19:04:10
阅读次数:
2617
ElasticSearch,和Solr一样,是底层基于ApacheLucene,且具备高可靠性的企业级搜索引擎。ElasticSearch中的一些概念其实和关系型数据库都有对应关系,比如数据库在ES中被称为索引,表在ES中被称作Type。具体对应关系见下表。ElasticSearch中的Replica是副本的意思,创建副本的..
分类:
其他好文 时间:
2014-11-25 19:00:58
阅读次数:
227