We use two Bind server to realize view, master, slave-------------------------------------------------------------------------------------------------...
分类:
其他好文 时间:
2014-07-22 22:57:13
阅读次数:
299
经过一段时间的配置,Hadoop环境总算运行起来了,但是呢,为何主节点就没有跑tasktracker和datanode进程,slave节点也没有跑secondary进程,Hadoop是如何控制的呢?经过看权威指南(267页)和跟群里同学讨论,还有自己测试,最终确定:tasktracker和datan...
分类:
其他好文 时间:
2014-07-19 20:19:01
阅读次数:
239
如上面所说:http://www.cnblogs.com/super-d2/p/3851957.html安装好mysql;mysql_multi方式配置Mysql数据库主从授予用于同步用的用户同步数据的权限grant replication slave on *.* to 'slave3306'@'...
分类:
数据库 时间:
2014-07-18 16:02:00
阅读次数:
328
本实验室配置一个全新的master和slave,最简单的方法去配置新的master和slave是从一个不同的数据库服务器生成一个数据库dump文件,然后导入到新的复制数据库的master里去,这些数据会自动的复制数据到slave数据库里去的。
实验环境:
master and the slave server machine have the same configuration as...
分类:
数据库 时间:
2014-07-18 11:30:14
阅读次数:
426
前言: spark最近非常的火热, 本文不讲spark原理, 而是研究spark集群搭建和服务的脚本是如何编写的, 管中窥豹, 希望从运行脚本的角度去理解spark集群. 研究的spark为1.0.1版. spark集群采用standalone模式搭建, 其基础架构为master-slave(w.....
分类:
其他好文 时间:
2014-07-17 23:26:44
阅读次数:
345
前言摘要MHA是当master出现故障,挑选一个slave作为新的master并构建成新的主从架构的管理工具。从master出现故障到构建成新的主从架构时间是10-30秒。在master出现故障时可能会出现slave同步的数据不一致的现象,此工具可以自动应用差异的中继日志到其他slave上保证数据的一致..
分类:
数据库 时间:
2014-07-17 20:23:43
阅读次数:
396
1.修改配置文件主服务器master: [mysqld] log-bin=mysql-binserver-id=222修改从服务器slave: [mysqld] log-bin=mysql-bin server-id=226重启两台服务器的mysql2.在主服务器...
分类:
数据库 时间:
2014-07-16 21:32:42
阅读次数:
216
一、Mysql5.6新特性....复制功能的改进⒈支持多线程复制,(slave-parallel-workers=00:表示禁用多线程功能;)事实上是针对每个database开启相应的独立线程。即每个库有一个单独的(sqlthread),如果线上业务中,只有一个database或者绝大多数压力集中在个别database的话,多线..
分类:
数据库 时间:
2014-07-14 12:30:47
阅读次数:
444
1.一般的异常只需要跳过一步即可恢复>slavestop;>SETGLOBALsql_slave_skip_counter=1;>slavestart;2.断电导致主从不能同步时,通主库的最后一个bin-log日志进行恢复在主库服务器上,mysqlbinlogmysql-bin.xxxx>binxxxx.txttail-n100000binxxxx.txt>tail-binxxxx..
分类:
数据库 时间:
2014-07-14 12:09:47
阅读次数:
304
HDFS和Mapreduce是Hadoop的两大核心。整个Hadoop的体系结构主要是通过HDFS来实现分布式存储的底层支持,MapReduce来实现分布式并行任务处理的程序支持。HDFSHDFS采用了主从(Master/Slave)结构模型,一个HDFS集群是由一个NameNode和若干个Data...
分类:
其他好文 时间:
2014-07-10 15:36:19
阅读次数:
204