一、摘要 在平常备库和数据库迁移的时候，当遇到大的数据库的时候在用exp的时候往往是需要好几个小时，耗费大量时间。oracle10g以后可以用expdp来导出数据库花费的时间要远小于exp花费的时间，而且文件也要小很多。 二、exp/imp与expdp/impdp区别 (1) 把用户usera的对象...
分类：
数据库 时间：
2014-09-12 09:58:43
阅读次数：
255
最近在做binlog日志采集同步到数据平台的事。刚开始需要借助sqoop将从库数据表数据初始化到hbase中，整个过程都需要自动化进行，尽量减少人为干预。但是，由于历史原因，线上存在两种字符集格式的数据库（表），而导入到hbase的数据我们需要统一采用utf-8格式存储。sqoop直接导入的话，没法控制中文字符转码工作。所以需要对sqoop源码进行简单改动支持这种方式。
大体思路是，通过定义一个...
分类：
数据库 时间：
2014-09-11 19:26:02
阅读次数：
573
继续来说编辑器的需求，前面介绍了拖拽创建节点、以及连线的方法，并加入到了其后的 Qunee 类库，实际应用中需要更多功能，Qunee 的拓扑图编辑器也在逐渐完善，一方面增加多种编辑交互，一方面提供数据导入导出，同时也在摸索编辑器的整体界面设计和前端开发框架
分类：
Web程序 时间：
2014-09-11 09:31:01
阅读次数：
223
刚接触这种数据搬移的方式会有很多问题 我只用过 第一种方式有的朋友会出现 SQL Server 阻止了对组件 /'Ad Hoc Distributed Queries/' 的访问 解决方案 请参考http://blog.csdn.net/the_pain/article/details/410351...
分类：
数据库 时间：
2014-09-10 17:40:30
阅读次数：
317
方法1： /** * 添加一行数据 * * @param tableName * 表名 * @param columnFamily * 列族名 * @param rowKey * ...
分类：
其他好文 时间：
2014-09-10 17:09:30
阅读次数：
493
一、Split触发条件
1、 有任一一个Hfile的大小超过默认值10G时，都会进行split
2、 达到这个值不在拆分，默认为int_max，不进行拆分
3、compaction时，如果compact的store的大小超过了，则进行split
4、 flush之前会检测区域中HStoreFile数目是否超过hbase.h...
分类：
其他好文 时间：
2014-09-10 10:52:00
阅读次数：
266
1. 表的设计1.1 Pre-Creating Regions默认情况下，在创建HBase表的时候会自动创建一个region分区，当导入数据的时候，所有的HBase客户端都向这一个region写数据， 直到这个region足够大了才进行切分。一种可以加快批量写入速度的方法是通过预先创建一些空的reg...
分类：
其他好文 时间：
2014-09-09 17:40:49
阅读次数：
203
package org.robby;
import java.io.IOException;
import java.text.DateFormat;
import java.text.SimpleDateFormat;
import java.util.ArrayList;
import java.util.Date;
import java.util.HashSet;
i...
分类：
其他好文 时间：
2014-09-09 13:26:48
阅读次数：
211
1. 配置概述 Spartan6系列FPGA通过把应用程序数据导入芯片内部存储器完成芯片的配置。Spart-6 FPGA可以自己从外部非易失性存储器导入编程数据，或者通过外界的微处理器、DSP等对其进行编程。对以上任何一种情况，都有串行配置和并行配置之分，串行配置可以减少芯片对引脚的要求，并行配置....
分类：
其他好文 时间：
2014-09-08 10:48:06
阅读次数：
2283
