##以上完成后在h3机器上配置sqoop-1.4.4.bin__hadoop-2.0.4-alpha.tar.gz//将宿主机上MySql的test库中的users表的数据导入到HDFS，默认Sqoop会起4个Map运行MapReduce进行导入到HDFS，存放在HDFS路径为/user/root/...
分类：
数据库 时间：
2015-01-20 00:49:00
阅读次数：
255
公司有个项目是准备基于jeesite再做开发，于是学习一下该框架。因为第一次接触java项目，部署的过程中也遇到一些问题。主要步骤还是按照开发文档一步一步来，但是到了数据导入时，报错了，发现是mysql默认安装编码不支持中文，需要修改编码为utf-8但是，发现修改编码后仍然报错，这是因为mysql修...
分类：
数据库 时间：
2014-12-16 11:17:33
阅读次数：
533
使用sqoop将mysql数据导入到hadoop...
分类：
数据库 时间：
2014-12-08 21:23:02
阅读次数：
282
hadoop的安装配置这里就不讲了。Sqoop的安装也很简单。完成sqoop的安装后，可以这样测试是否可以连接到mysql(注意：mysql的jar包要放到 SQOOP_HOME/lib 下)：sqoop list-databases --connect jdbc:mysql://192.168.1...
分类：
数据库 时间：
2014-12-08 19:07:13
阅读次数：
273
在这个脚本中我使用的是Python的ORM框架SQLAlchemy来连接远程的MySQL数据库的，在写这个脚本的时候为了方便参数的输入，我就给之前和这个脚本添加了一个新的功能，就是在调用这个脚本的时候后面可以传入参数，这样只需要在执行脚本的时候就可以方便的输入所要使用的路径。 那么现在开始对导出的....
分类：
数据库 时间：
2014-11-15 23:04:24
阅读次数：
423
http://blog.chinaunix.net/uid-23354495-id-3188029.htmlmysql备份脚本之select into outfile
分类：
数据库 时间：
2014-11-09 09:49:34
阅读次数：
237
在不同操作系统或MySQL版本情况下，直接拷贝文件的方法可能会有不兼容的情况发生。所以一般推荐用SQL脚本形式导入。下面分别介绍两种方法。进入cmd导出所有数据库：输入：mysqldump -u [数据库用户名] -p -A>[备份文件的保存路径]导出数据和数据结构：输入：mysqldump -u ...
分类：
数据库 时间：
2014-11-05 19:28:26
阅读次数：
268
在做程序时，sqlite数据很方便。用mysql数据导出到sqlite的步骤：（用csv文件过渡）------------------------------- 先导出到csv文件 -------------------------1、用navicat软件将mysql数据导出到txt文件。2、注意选...
分类：
数据库 时间：
2014-08-15 23:44:39
阅读次数：
325
因为业务需要，需要将一批mysql数据导入到HBASE，现在先将数据从Mysql导出到HDFS。版本：hadoop CDH4.5，Hbase-0.946 1、实体类 YqBean 是我的实体类，请根据自己需要修改，实体类需要 implements Writable, DBWritable。 ...
分类：
数据库 时间：
2014-07-29 11:50:56
阅读次数：
292
今天试图用heidisql 导入一个150M的数据文件(.sql), 结果报out of memory 错误。在网上搜了很多案例，都没能解决问题。我甚至怀疑是mysql 的default的内存设置的太小了。于是跑到my.ini文件里修改了innodb_buffer_pool_size 为96M * ...
分类：
数据库 时间：
2014-07-01 16:59:24
阅读次数：
395
