在向数据库的表中导入csv数据时，出现了中文乱码的问题，解决办法是在选择编码格式时选择10008 (MAC - Simplified Chinese GB 2312)即可 ...
分类：
数据库 时间：
2020-02-09 16:42:08
阅读次数：
148
sqoop在导入数据时，可以使用--query搭配sql来指定查询条件，并且还需在sql中添加\$CONDITIONS，来实现并行运行mr的功能。 运行测试 测试均基于sqoop1，mysql数据准备如下。 （1）只要有--query+sql，就需要加\$CONDITIONS，哪怕只有一个mapta ...
分类：
其他好文 时间：
2020-02-07 15:06:18
阅读次数：
800
doris03 简单使用 [toc] 1. 设置用户名和密码 1.1) 修改root密码 登陆 是任一 FE 节点的 ip 地址。 是 fe.conf 中的 query_port 配置。 设置密码: 1.2) 创建新用户 后续登陆可以使用新创建的用户登陆 授权: 需要先建库 2 建库建表, 导入数据 ...
分类：
其他好文 时间：
2020-02-05 18:03:28
阅读次数：
387
一、导入SQL 方法一： （1）选择数据库 （2）设置数据库编码 （3）导入数据（注意sql文件的路径） 方法二： 2、只导出表结构 ...
分类：
数据库 时间：
2020-02-04 16:06:20
阅读次数：
140
今天没有继续整数据，这个数据还需要进一步的清洗，很麻烦，暂时不想清洗，今天看了一部分spark的内容，在网上查找了一些资料，明天将使用eclipse连接spark进行编程实验，或者进行数据的清洗。 今天也将数据导入到了数据库中。 ...
分类：
其他好文 时间：
2020-02-03 19:08:28
阅读次数：
48
在Django中需要向数据库中插入多条数据（list）。使用如下方法，每次save()的时候都会访问一次数据库。导致性能问题: 在django1.4以后加入了新的特性。使用 批量创建对象，减少SQL查询次数。改进如下： Model.objects.bulk_create() 更快更方便 常规用法: ...
分类：
其他好文 时间：
2020-01-29 17:38:37
阅读次数：
187
oracle通过数据泵进行导入导出（impdp/expdp），区别于普通的导入导出（imp/exp），导出的文件不通用，数据泵导出的只能数据泵进行导入。数据泵导出速度要比普通的exp导出要快，但需要在数据库服务器上才能导出，不能远程导出。 1.导出 expdp 帐号/密码 directory=路径 ...
分类：
数据库 时间：
2020-01-29 14:04:38
阅读次数：
92
最近有一个将 mysql 数据导入到 MongoDB 中的需求，打算使用 Kettle 工具实现。本文章记录了数据导入从0到1的过程，最终实现了每秒钟快速导入约 1200 条数据。一起来看吧~ 一、Kettle 连接图 简单说下该转换流程，增量导入数据： <! more 1）根据 source 和 ...
分类：
数据库 时间：
2020-01-24 23:40:06
阅读次数：
116
一、课堂导入 # 数据可视化是一门通过将数据放在可视环境中来理解数据的学科， # 主要旨在借助工具将数据制作成图表等形式，来清晰、直观、高效的传达与沟通信息。 # 上节课我们学习到了饼状图、水球图等图表制作，本节课我们将会继续深入探究图表的操作。 二、绘制图形的操作步骤 # 创建图形对象 # 添加数 ...
分类：
其他好文 时间：
2020-01-22 19:50:45
阅读次数：
84
1、进入Mysql mysql -u root -p 输入密码进入，如果没设置过密码密码就为空 2、创建新的数据库 mysql>create database test; 3、选择数据库 mysql>use test; 4、设置数据库编码 mysql>set names utf8; 5、导入数据库文 ...
分类：
数据库 时间：
2020-01-22 18:41:15
阅读次数：
94
