Hadoop的配置文件解释hadoop-env.sh: 用于定义hadoop运行环境相关的配置信息,比如配置JAVA_HOME环境变量、为hadoop的JVM指定特定的选项、指定日志文件所在的目录路径以及master和slave文件的位置等;core-site.xml: 用于定义系统级别的参数,它作...
分类:
其他好文 时间:
2014-07-11 13:05:01
阅读次数:
275
1.配置环境说明 spark:5台zybo板,192.168.1.1master,其它4台为slave hadoop:192.168.1.1(外接SanDisk ) 2.单节点hadoop测试: 如果出现内存不足情况如下: 查看当前虚拟内存容量: free -m cd /mnt mkdir swap...
分类:
其他好文 时间:
2014-07-11 11:38:44
阅读次数:
407
DG之主库、备库切换
一.开库与关库顺序
开库顺序
先启备库,再启主库(启动监听、打开告警日志)
关库顺序
先关主库,再关备库
二.主备库切换
1、操作过程一览
步骤1:启动备库、监听、告警;
步骤2:启动主库、监听、告警;
步骤3:主库(bj)查询信息
SQL>selectname,dbid,databa...
分类:
其他好文 时间:
2014-07-09 09:48:25
阅读次数:
166
下面的列表清楚的解释了RedisReplication的特点和优势。1).同一个Master可以同步多个Slaves。2).Slave同样可以接受其它Slaves的连接和同步请求,这样可以有效的分载Master的同步压力。因此我们可以将Redis的Replication架构视为图结构。3).MasterServer是以非阻塞的方式为Slave..
分类:
其他好文 时间:
2014-07-08 12:03:40
阅读次数:
228
下面的列表清楚的解释了RedisReplication的特点和优势。1).同一个Master可以同步多个Slaves。2).Slave同样可以接受其它Slaves的连接和同步请求,这样可以有效的分载Master的同步压力。因此我们可以将Redis的Replication架构视为图结构。3).MasterServer是以非阻塞的方式为Slave..
分类:
其他好文 时间:
2014-07-08 09:38:00
阅读次数:
259
运维的时候,经常遇到auto_increment的疑惑:机器异常crash,重启后id回退的问题性能考虑,每次获取肯定不会持久化,内存中取值,statement复制如何保证主备一致id的取值受binlog的保护吗1. auto_increment相关的参数控制 1.1 innodb_autoinc_...
分类:
数据库 时间:
2014-07-06 16:32:46
阅读次数:
315
前文介绍到SRIO有多重类型的包,其中包含了Doorbell包,Doorbell是一种快速的通知类型的短消息,包头和携带信息都很短,用于master srio设备通知slave srio设备,可用于DSP间的消息通知,也可用于FPGA与DSP间的消息通知。
Doorbell包payload的大小为16bit,如下图阴影处为有效位,其他为reserve位。5,6位用于选择Doorbell中断状态寄...
分类:
其他好文 时间:
2014-07-05 23:53:45
阅读次数:
391
Slave crash-safe replication
mysql的slave启动时,error.log中出现Warning警告:
[Warning] Slave SQL: If a crash happensthis configuration does not guarantee that the relay log info will beconsistent, Error_code: 0...
分类:
移动开发 时间:
2014-07-03 18:15:13
阅读次数:
278
Last_IO_Error: The slave IO thread stopsbecause the master has @@GLOBAL.GTID_MODE OFF and this server has@@GLOBAL.GTID_MODE ON...
分类:
数据库 时间:
2014-07-03 17:31:44
阅读次数:
348
一、什么是redis主从复制?主从复制,当用户往Master端写入数据时,通过RedisSync机制将数据文件发送至Slave,Slave也会执行相同的操作确保数据一致;且实现Redis的主从复制非常简单。二、redis主从复制特点1、同一个Master可以拥有多个Slaves。2、Master下的Slave还可以接受同..
分类:
数据库 时间:
2014-07-03 14:26:26
阅读次数:
333