Hadoop集群启动之后,用JPS命令查看进程发现datanode节点上,只有TaskTracker进程.如下图所示master的进程:两个slave的节点进程发现salve节点上竟然没有datanode进程.查看了日志,发现有这样一句话:这句话的意思是:datanode上的data目录权限是765...
分类:
其他好文 时间:
2014-10-28 02:02:29
阅读次数:
634
我们知道 Mysql读和写在性能方面的开销区别是较大的,一般来说 服务器顶着20%写的压力,另外80%的压力来自读,当然这也得看实际业务情况。
这篇文章准备配置一主三从,其实多少从没什么关系,一主多从其实是一主一从的延伸,因为从库之间是没有任何通信的,具体使用哪种方式看带宽负载和具体流量。
Mysql的主从replication原理其实就是Master不断地写二进制日志,Slave去读取日志,...
分类:
数据库 时间:
2014-10-24 23:39:30
阅读次数:
421
package com.loongtao.general.crawler.slave;import java.util.regex.Matcher;import java.util.regex.Pattern;public class HtmlUtil { private static fin...
分类:
编程语言 时间:
2014-10-24 18:03:33
阅读次数:
248
MySQL主从复制(Master-Slave)与读写分离(MySQL-Proxy)实践Mysql作为目前世界上使用最广泛的免费数据库,相信所有从事系统运维的工程师都一定接触过。但在实际的生产环境中,由单台Mysql作为独立的数据库是完全不能满足实际需求的,无论是在安全性,高可用性以及高并发等各个方面...
分类:
数据库 时间:
2014-10-24 14:34:58
阅读次数:
300
安装uuencodeyuminstallsharutils创建shell脚本#!/bin/bash
date_str=`date+%Y%m%d`
slave=$(/Disk/mysql/bin/mysql-ucheckslave-p123-h127.0.0.1-e"showslavestatus\G"|grepRunning|grepYes|wc-l)
if(($slave==2))
then
echo"SlaveisOK|Status=${slave}Yes|date=${date_str}"&..
分类:
数据库 时间:
2014-10-23 21:13:26
阅读次数:
211
在前面一系列的文章中,我们讲述了mongodb的基本操作,高级查询以及索引的使用。该篇博客主要说明在windows系统如何创建主从数据库同步;
需要启动两个mongoDb文档数据库,一个是主模式启动,另一个是属于从模式启动。
1. 创建主从服务器
主服务器:192.168.1.131:27017
备服务器:192.168.1.131:27015
创...
分类:
数据库 时间:
2014-10-23 06:48:34
阅读次数:
212
之前只理解zk可以做命名,配置服务,现在学习下他怎么用作构建master-slave模式的分布式系统。为什么叫Zoo?“因为要协调的分布式系统是一个动物园”。ZooKeeper是一个中性化的Service,用于管理配置信息、命名、提供分布式同步,还能组合Service。所有这些种类的Service都...
分类:
其他好文 时间:
2014-10-22 21:43:15
阅读次数:
813
keepalived实现nginx发生故障时,自动切换,实现nginx反向代理的高可用。环境:CentOS6.464bit;Jdk6.tar.gzAapache-tomcat-6.0.41.tar.gznginx-1.4.2.tar.gz主机规划:keepalived-master:192.168.115.10keepalived-slave:192.168.115.20tomcat1:192.168.115.30tomcat2:192.168..
分类:
其他好文 时间:
2014-10-22 18:35:34
阅读次数:
398
mysql> start slave;ERROR 1872 (HY000): Slave failed to initialize relay log info structure from the repository处理一则MySQL Slave环境出现ERROR 1201 (HY000): C...
分类:
数据库 时间:
2014-10-22 06:24:36
阅读次数:
439
MySQL双机热备环境说明Msql主备结构1、Master:Mysql主节点,Master接收到来自Slave的IO进程的请求后,通过负责复制的IO进程根据请求信息读取制定日志指定位置之后的日志信息,返回给Slave的IO进程。返回信息中除了日志所包含的信息之外,还包括本次返回的信息已经到Master端的..
分类:
数据库 时间:
2014-10-20 19:40:15
阅读次数:
433