背景：
在web应用中，我们经常使用黑白名单，在http://blog.csdn.net/troy__/article/details/39320699中我们实现了一个线程安全的针对全量请求的缓存机制，这种技术主要是用于黑白名单的全量更新。但是我们不能经常请求全量吧，网络和数据库都会累死，所以在此我们设计实现一个针对增量请求的缓存机制。全量请求提供黑白名单低频度的更新，增量请求提供黑白...
分类：
其他好文 时间：
2014-09-24 19:21:57
阅读次数：
395
场景：某天执行了deletefromt1操作忘加where条件，我们需要通过昨天的全量备份+误操作之前的binlog增量备份，加以恢复。在通过mysqlbinlog解析时，需要用sed命令去过滤出t1表的insert、delete、update操作，如果binlog文件很多，并且默认是1G的大小，用这种方法费时费力，很麻..
分类：
其他好文 时间：
2014-09-16 02:46:00
阅读次数：
223
Rsync参数介绍一、RsyncRsync是一款开源的、快速的、多功能的、可实现全量及增量的本地或远程数据镜像同步备份的优秀工具。rsync适用于unix/linux/windows等多种操作系统平台。http://www.samba.org/ftp/rsync/rsync.htmlRsync全称为...
分类：
其他好文 时间：
2014-09-07 21:04:25
阅读次数：
224
基于Solr4.9.0演示对商品信息的全量索引建立、主从配置以及搜索的Dubbo接口提供；对Solr做了入门型的说明，基本满足基于Solr的搜索的日常应用，对于更多Solr的参数设置，深入研究需要在实践中不断总结进步。...
分类：
其他好文 时间：
2014-08-30 12:40:49
阅读次数：
266
需求
将Oracle中的业务基础表增量数据导入Hive中，与当前的全量表合并为最新的全量表。
设计
涉及的三张表：
全量表：保存了截止上一次同步时间的全量基础数据表
增量表：增量临时表
更新后的全量表：更新后的全量数据表
步骤：
通过Sqoop将Oracle中的表导入Hive，模拟全量表和增量表
通过Hive将“全量...
分类：
数据库 时间：
2014-08-21 19:22:14
阅读次数：
455
眼下全量索引17G,不到1300万document花费大约25分钟的时间(Lucene 4.0)，吞吐量远远低于lucene nightly build宣称的170G/h的量。换用StandardAnalyzer,有34%的提高，比較下使用的KAnalyzer,mmseg4j1.9.2-snapsh...
分类：
其他好文 时间：
2014-08-12 21:45:54
阅读次数：
193
http://www.cnblogs.com/opaljc/archive/2013/04/09/3009898.html外连接有以下三种（一般没有left、right、full等关键字的都是内连接）：1. 左外连接（以左表为基础表，左表全量数据）：left [outer] join2. 右外连接（...
分类：
数据库 时间：
2014-08-10 18:04:40
阅读次数：
215
开发者扶持计划思维导图:开发者扶持计划全量测试用例聚无限-开发者扶持计划.xmind聚无限控制台、后台聚无限-控制台、SDK.xmind01整体测试思路图01登录、绑定账号流程02前台起步计划02前台创建应用、数据检查、log检查、job检查、监控报警检查05运营后台01后台组件管理
分类：
其他好文 时间：
2014-07-30 12:11:43
阅读次数：
263
开发者扶持计划活动业务流程图全量开发者扶持计划流程图.edx01登录、绑定账号流程02个人、企业认证流程03参加起步计划流程参加助力计划流程AB套餐起步计划升级流程
分类：
其他好文 时间：
2014-07-30 12:11:23
阅读次数：
269
mysql主从复制：常见问题：1、主从不同步（同步延迟）主从复制考虑的自动化问题：备份自动化：1、全量备份2、增量备份恢复自动化添加从库自动化智能监控:pytondns
分类：
数据库 时间：
2014-07-20 23:31:34
阅读次数：
323
