做数据迁移后,通过ui发现有日文数据是乱码,通过ui直接修改日文则显示正常.查了下资料,mysql字符集的作用如下:MySQL字符集设置? 系统变量:– character_set_server:默认的内部操作字符集– character_set_client:客户端来源数据使用的字符集– char...
分类:
数据库 时间:
2015-07-01 20:11:59
阅读次数:
230
介绍
这套系统,logstash负责收集处理日志文件内容存储到elasticsearch搜索引擎数据库中。kibana负责查询elasticsearch并在web中展示。
logstash收集进程收获日志文件内容后,先输出到redis中缓存,另一logstash处理进程从redis中读出并转存到elasticsearch中,以解决读快写慢速度不一致问题。...
分类:
其他好文 时间:
2015-06-30 12:55:52
阅读次数:
204
一.dbschemaUSAGE: dbschema [-q] [-t tabname] [-s user] [-p user] [-r rolename] [-f procname] [-hd tabname] -d dbname [-w passwd] [-seq sequence] [-l [n...
分类:
其他好文 时间:
2015-06-29 21:44:31
阅读次数:
365
项目开发时,使用了两套数据库,开发环境和上线环境,数据库表中大多采用了自增主键,
比如:id int unsigned primary key auto_increment,但往往会碰到一些问题,比如:
开发环境中,使用爬虫抓取一些数据,建立索引,再把数据迁移到上线环境,会导致索引中的id和
上线环境数据库中id对不上,所以决定使用字符串作为主键。那么问题来了,如何生成唯一的序列号?
格式按...
分类:
其他好文 时间:
2015-06-29 13:23:23
阅读次数:
251
Solr4.0版本后引入了solrcloud,用于扩展Solr的索引与搜索能力,同时提高Solr的容错能力与高可用。
在SolrCloud中,有几个比较重要的知识点:SolrCloud中collection、shard、core、node相关概念;SolrCould路由策略;创建Collection;和如何进行数据迁移。
通过学习研究,总结SolrCloud学习中的心得,较为详细地介绍了上述几个知识点。...
分类:
其他好文 时间:
2015-06-29 10:17:30
阅读次数:
180
用了codefirst后一个很大的问题就是代码中的属性字段与数据库中表的同步问题,删掉数据库重新生成当然可以解决,不过数据就丢失了(当然通过代码中初始化数据库添加数据也可以解决,初始化的任务可以通过重写Seed方法实现)。很多情况我们希望测试数据还在,通过查询知道Code First Migrati...
分类:
其他好文 时间:
2015-06-27 15:51:30
阅读次数:
89
因公司数据安全和分析的需要,故调研了一下 GlusterFS + lagstash + elasticsearch + kibana 3 + redis 整合在一起的日志管理应用:安装,配置过程,使用情况等续一,glusterfs分布式文件系统部署:说明:公司想做网站业务日志及系统日志统一收集和.....
分类:
其他好文 时间:
2015-06-25 00:08:21
阅读次数:
384
ElasticSearch性能优化主要分为4个方面的优化。一、服务器部署1、增加1-2台服务器,用于负载均衡节点elasticSearch的配置文件中有2个参数:node.master和node.data。这两个参数搭配使用时,能够帮助提供服务器性能。node.master:falsenode.data:true该node服务器只作为一个数据..
分类:
其他好文 时间:
2015-06-23 18:16:21
阅读次数:
145