最近在学习大数据，需要安装Hadoop，自己弄了好久，最后终于弄好了。网上也有很多文章关于安装Hadoop的，但总会遇到一些问题，所以把在CentOS 7安装Hadoop 3.0.0的整个过程记录下来，有什么不对的地方大家可以留言更正。 一、ssh免密登录 1、测试是否能免密登录 # ssh loc ...
分类：
其他好文 时间：
2018-03-06 10:16:03
阅读次数：
301
1.设计表时如何使用char 与 varchar? 请写出你对varchar(max)的理解。 1.设计表时如何使用char 与 varchar? 请写出你对varchar(max)的理解。 char:是定长的，也就是当你输入的字符小于你指定的数目时，会在后面补空值。比如定义char(10)，你输入 ...
分类：
数据库 时间：
2018-02-26 21:40:29
阅读次数：
230
Redis 服务器命令主要是用于管理 redis 服务。 实例 以下实例演示了如何获取 redis 服务器的统计信息： Redis 服务器命令 下表列出了 redis 服务器的相关命令: ...
分类：
其他好文 时间：
2018-02-21 15:56:16
阅读次数：
150
一、前言：读写分离的基本原理 mysql的读写分离的基本原理是：让master（主数据库）来响应事务性操作，让slave（从数据库）来响应select非事务性操作，然后再采用主从复制来把master上的事务性操作同步到slave数据库中。实现简单的负载均衡。二、前期准备工作： 1、准备两台服务器，我这里准备的是192.168.4.122
分类：
数据库 时间：
2018-01-31 22:23:46
阅读次数：
268
一、介绍及准备工作1.介绍MySQL主从配置又叫Replication或者AB复制，简单讲就是A和B两台机器做主从后，在A上写数据，另一台B也会跟着写数据，两台数据实时同步。MySQL主从是基于binlog的，主上须开启binlog才能进行主从。主从过程大致有3个步骤主将更改操作记录到Binlog里从将主的Binlog事件（sql语句）同步到从本机上并记录在relaylog里从根据relaylog
分类：
数据库 时间：
2018-01-31 15:39:43
阅读次数：
271
MySQL主从备份配置实例 场景: 1、主服务器192.168.0.225、从服务器192.168.0.226。其中，主服务器上已有数据。 2、主从服务器上的mysql版本及安装配置相同。 一、主从备份的原理: 主服务器数据库的每次操作都会记录在二进制日志文件mysql-bin.xxx中。从服务器的 ...
分类：
数据库 时间：
2018-01-28 20:55:15
阅读次数：
211
1.一致性导出在OGG同步的项目中，总会遇到默写表同步失败需要重新表级初始化。这时候采用数据泵来导入导出就需要考虑数据一致性问题，确保我们导出的数据是基于某个scn或者某个时间戳，这样做才能让已经停止的复制进程（replicat）知道从哪里开始追加数据库变化。12c中数据泵为我们提供了两种一致性导出的参数，一个是基于scn的FLASHBACK_SCN,另一个是基于时间戳的FLASHBACK_TIM
分类：
其他好文 时间：
2018-01-23 13:04:23
阅读次数：
218
转自：http://blog.csdn.net/atco/article/details/24259333 说明：当开启mysql数据库主从时，会产生大量如mysql-bin.00000* log的文件，这会大量耗费您的硬盘空间。mysql-bin.000001mysql-bin.000002mys ...
分类：
数据库 时间：
2018-01-15 20:30:10
阅读次数：
204
1、使用HDFS提供的客户端Client，向远程的Namenode发起RPC请求2、Namenode会检查要创建的文件是否已经存在，创建者是否有权限进行操作，成功则会为文件创建一个记录，否则会让客户端抛出异常；3、当客户端开始写入文件的时候，客户端会将文件切分成多个packets，并在内部以数据队列“data queue（数据队列）”的形式管理这些packets，并向Namenode申请block
分类：
其他好文 时间：
2018-01-14 16:47:59
阅读次数：
148
1.从源端拷贝表定义语句，在目标端执行，确保两边表定义一致，另外需要增加三个字段（INC_ID--记录序列值，ACP_TIME--记录接受时间，FLAG--记录操作类型） 2.在源端表增加补充日志trandata（因为源端已经有该表的抽取，所以该步骤可以省略） 3.目标端添加replicat进程 4 ...
分类：
其他好文 时间：
2018-01-07 00:50:36
阅读次数：
448
