前言Redis是一个开源的高性能键值对数据库。它通过提供多种键值数据类型来适应不同场景下的存储需求，并借助许多高层级的接口使其可以胜任如缓存、队列系统等不同的角色。Redis持久化了解为了让性能更加优异，Redis默认是把所有的数据都存在内存中的。但是当服务器重启或程序异..
分类：
其他好文 时间：
2015-01-05 18:55:40
阅读次数：
198
某客户有个需求，有2张业务表，数据量比较大，有2000W行，现在的需求是把这2张表中的一部分记录，根据一定的where条件分离出去，创建到另外的归档表中，即做表记录的迁移操作。最后得到的结果是：未满足筛选条件的记录留在原表中，满足筛选条件的表要插入到归档表中，并且要在原表中删除这些插入到归档表中的全部记录，最后满足：新表记录+归档记录=原表记录数
下面我来模拟一下这个过程：
...
分类：
其他好文 时间：
2014-12-30 23:37:23
阅读次数：
273
1 classes = %w(Call City Province Tag) 2 classes.each do |obj_name| 3 obj = Object.const_get(obj_name) 4 obj.establish_connection :production 5 ...
分类：
其他好文 时间：
2014-12-26 00:50:13
阅读次数：
190
感谢shwenwen转自http://www.itpub.net/thread-355437-1-2.html09: 09 ETL的考虑做数据仓库系统，ETL是关键的一环。说大了，ETL是数据整合解决方案，说小了，就是倒数据的工具。回忆一下工作这么些年来，处理数据迁移、转换的工作倒还真的不少。但是那...
分类：
其他好文 时间：
2014-12-24 11:30:35
阅读次数：
218
测试的时候向数据库中插入了大量的数据，测试完成后删除了测试用户以及其全部数据，但是数据文件却没有缩小。经查阅资料之后发现这是 Oracle “高水位”所致，那么怎么把这些数据文件的大小降下来呢？解决办法如下：概念：表空间的相关知识请见这里，详细的介绍了 Oracle 数据库的存储结构。高水位：Hig...
分类：
数据库 时间：
2014-12-23 19:04:23
阅读次数：
205
需求：在使用Sqoop的时候需要从Linux服务器远程登录到Windows的MySql数据库，进行数据迁移时。1、使用命令登录mysql数据库 mysql -uroot -p1234562、mysql默认是不允许远程连接的，修改为可以使用远程连接 grantallon *.*to'root'@'.....
分类：
数据库 时间：
2014-12-22 12:34:26
阅读次数：
140
微信并没有给ASP.net用户提供一个很好的实例，只好苦心研究，经过一个下午的努力和N次测试，终于知道如何解密和验签nofify的数据了，以下是我实现的代码，好东西需分享给各位朋友：（以下的商户编号我已经修改过，所以没有返回true，请根据自己的实际数据测试）usingSystem;usingSys...
分类：
微信 时间：
2014-12-22 10:56:05
阅读次数：
1755
安装CollabNetzabbix实现svn服务并实现数据迁移1.下载wgethttps://downloads-guests.open.collab.net/files/documents/61/9424/CollabNetzabbix-4.0.11_linux-x86_64.tar.gz2.安装jdkwgethttp://download.oracle.com/otn/java/jdk/6u41-b02/jdk-6u41-linux-x64-rpm.bin?AuthPar..
分类：
Web程序 时间：
2014-12-22 02:09:21
阅读次数：
213
最近在一次MySQL数据迁移的过程中遭遇了字符集的问题，提示为"Character set 'utf8mb4' is not a compiled character set"。即是字符集utf8mb4不是一个编译的字符集以及没有在Index.xml文件里指定。下面是其处理过程及解决办法，供大家参考。 1、错误提示SHELL>mysqlbinlog --database=bs_salary --s...
分类：
其他好文 时间：
2014-12-19 12:16:50
阅读次数：
221
最近由于数据迁移过，有些用户信息需要再次确认下，也许数据量比较大，但是需要最终确认的比如说是用户ID和其对应的用户积分数，这样就会导致出现文本a（老的数据），文本b（新的数据）。比如1101 1231102 1111103 1451104 152这是文本a.txt文本b.txt如下1101 12.....
分类：
编程语言 时间：
2014-12-18 18:35:21
阅读次数：
194
