今天搭建logsatsh+redis+elasticsearch时出现了问题,经过近一小时排查,终于解决。记录一下。
环境是这样,一台客户端发送数据到位于服务器的redis,服务器端的logstash读redis的数据,存储到elasticsearch中。
初步问题是这样的:在服务器端,没有收到客户端发送过来的日志。
这样就可能有两种问题:一是客户端的logstash没有成功发送数据到red...
分类:
其他好文 时间:
2014-11-27 20:31:10
阅读次数:
185
项目地址:https://github.com/4onni/elasticsearch-analysis-ansjhttps://github.com/laigood/elasticsearch-analysis-ansj安装步骤基本上是按照第一个网页的要求安装的,通过插件的形式.
分类:
其他好文 时间:
2014-11-27 20:12:46
阅读次数:
152
elasticsearch的资料不少,重复的太多,关键的太少。我根据自己的使用经验,逐步总结一些。希望能帮大家少浪费点时间。
1、如何判断某个索引是否存在?
Client searchClient client; //这里的初始化可以参考其他资料
IndicesExistsRequest request = new IndicesExistsRequestBuilde...
ES从1.2.1升级到1.4.0升级步骤,基本上是按照官网的叙述来完成的,链接是:http://www.elasticsearch.org/guide/en/elasticsearch/reference/current/setup-upgrade.html#_1_0_and_later,参考的内容...
分类:
其他好文 时间:
2014-11-26 20:32:15
阅读次数:
610
根对象(Root Object)
映射的最顶层被称为根对象。它包含了:
属性区域(Properties Section),列举了文档中包含的每个字段的映射信息。各种元数据(Metadata)字段,它们都以_开头,比如_type,_id,_source。控制用于新字段的动态探测(Dynamic Detection)的设置,如analyzer,dynamic_date_formats和dy...
分类:
其他好文 时间:
2014-11-26 11:24:04
阅读次数:
267
ElasticSearch,和Solr一样,是底层基于ApacheLucene,且具备高可靠性的企业级搜索引擎。ElasticSearch中的一些概念其实和关系型数据库都有对应关系,比如数据库在ES中被称为索引,表在ES中被称作Type。具体对应关系见下表。ElasticSearch中的Replica是副本的意思,创建副本的..
分类:
其他好文 时间:
2014-11-25 19:00:58
阅读次数:
227
自定义解析器(Custom Analyzers)
虽然ES本身已经提供了一些解析器,但是通过组合字符过滤器(Character Filter),分词器(Tokenizer)以及词条过滤器(Token Filter)来创建你自己的解析器才会显示出其威力。
在解析和解析器中,我们提到过解析器(Analyzer)就是将3种功能打包得到的,它会按照下面的顺序执行:
字符过滤器(Cha...
分类:
其他好文 时间:
2014-11-25 12:52:50
阅读次数:
247
一步一步,从未知到懵懂到……脚印从来没有停止过……mongodb+asp.net webapi开放平台系列渐行渐近……梳理此项目中的知识点包括mongodb,asp.net webapi oauth2 elasticsearch mvcmongodb基础知识学习Mongodb学习笔记一(Mongod...
分类:
数据库 时间:
2014-11-25 12:40:04
阅读次数:
482
#!coding=utf-8
importre
importsys
defcompile_mail(file_path):
#匹配想要的邮箱,去除不想要的内容
address=re.compile(
‘‘‘
(?![\w\d.+]+@139.com)#去除不想要的邮箱
[\w\d.+]+#匹配前缀
@
([\w\d.]+\.)+#匹配域名
com#匹配结尾
‘‘‘,
re.UNICODE|re.VERBOSE)
wi..
分类:
编程语言 时间:
2014-11-25 02:01:30
阅读次数:
188
elasticsearch如何处理同一个field多个值的情况。...
分类:
其他好文 时间:
2014-11-24 13:39:59
阅读次数:
249