不管是网站还是app很多产品的设计思路和产品功能多多少少都有相似之处，那么这边主要讲以下几个场景 描述、话题的搜索 主要的实现思路是全量索引＋增量索引方式，可设定时任务定点跑索引 用户昵称的搜索 主要是实现思路是实时索引＋分布式索引的方式，用户由于过多，故使用实时索引的方法进行增加，旧数据通过跑脚本 ...
分类：
其他好文 时间：
2016-07-25 01:40:55
阅读次数：
119
XtrabackupXtrabackup是由percona开源的免费数据库热备份软件，它能对InnoDB数据库和XtraDB存储引擎的数据库非阻塞地备份（对于MyISAM的备份同样需要加表锁）；mysqldump备份方式是采用的逻辑备份，其最大的缺陷是备份和恢复速度较慢，如果数据库大于50G，mysqldump备份就不太..
分类：
数据库 时间：
2016-07-22 16:17:53
阅读次数：
370
rsync介绍Rsync是一款开源的、快速的、多功能的、可实现全量及增量的本地或远程数据同步备份的优秀工具。后端的存储数据库都需要实时同步，而rsync用在存储的实时同步。inotify不会对老的数据进行增量，只有新的数据才会增量，这样就不存在比对的问题生产场景集群架构服务器备..
分类：
其他好文 时间：
2016-07-15 17:32:09
阅读次数：
218
gpdbrestore命令是对gp_restore命令的一个包装，提供了更灵活的选项，比如，使用gpcrondump自动备份的文件来恢复。使用gpdbrestore恢复必须具备： gpdbrestore命令是对gp_restore命令的一个包装，提供了更灵活的选项，比如，使用gpcrondump自动 ...
分类：
数据库 时间：
2016-07-15 13:23:50
阅读次数：
1340
redis全面介绍：数据保存在磁盘，支持数据的持久化，支持多种数据格式：redis支持的两种文件格式：持久化：rdb全量数据：把内存中的数据生成快照写入磁盘。aof增量请求：把内存中的数据序列化为操作请求恢复度更高没读一次都写入内存redis存储分为：内存磁盘log文件redis的安装..
分类：
其他好文 时间：
2016-07-11 01:19:40
阅读次数：
187
按照上一节中《搭建高可用mongodb集群（三）—— 深入副本集》搭建后还有两个问题没有解决：
从节点每个上面的数据都是对数据库全量拷贝，从节点压力会不会过大？数据压力大到机器支撑不了的时候能否做到自动扩展？
在系统早期，数据量还小的时候不会引起太大的问题，但是随着数据量持续增多，后续迟早会出现一台机器硬件瓶颈问题的。而mongodb主打的就是海量数据架构，他不能解决海量数据怎么行！不...
分类：
数据库 时间：
2016-07-10 19:03:22
阅读次数：
300
在上一篇文章《搭建高可用MongoDB集群（一）——配置MongoDB》 提到了几个问题还没有解决。
主节点挂了能否自动切换连接？目前需要手工切换。主节点的读写压力过大如何解决？从节点每个上面的数据都是对数据库全量拷贝，从节点压力会不会过大？数据压力大到机器支撑不了的时候能否做到自动扩展？
这篇文章看完这些问题就可以搞定了。NoSQL的产生就是为了解决大数据量、高扩展性、高性能、灵活数...
分类：
数据库 时间：
2016-07-10 19:02:21
阅读次数：
245
脚本采用json配置文件，可以自定义，备份目录，全量备份周期，增量备份时间等。 JSON配置文件: 主程序 ...
分类：
其他好文 时间：
2016-07-09 15:02:34
阅读次数：
347
Rsync介绍Rsync是一款开源的、快速的、多功能的、可实现全量及增量的本地或远程数据同步备份的优秀工具。后端的存储数据库都需要实时同步，而rsync用在存储的实时同步。inotify不会对老的数据进行增量，只有新的数据才会增量，这样就不存在比对的问题生产场景集群架构服务器备..
分类：
其他好文 时间：
2016-07-07 17:35:36
阅读次数：
139
SOLR文档 前言 因为项目中要用到solr，因此花了一周多的时间研究了一下solr，其中的各种问题我就不说了，特别是这两天在研究定时增量索引的时候，心里不知道多少个XXX在奔腾，好了，废话不多说，下面把我得研究成果跟大家分享一下，另外对于SOLR是什么，大家还是自行度娘吧，让我说我也说不清楚。 版 ...
分类：
数据库 时间：
2016-07-07 09:55:08
阅读次数：
235
