来源:伯乐在线 - biakia链接:http://blog.jobbole.com/108570/数据库优化有很多可以讲,按照支撑的数据量来分可以分为两个阶段:单机数据库和分库分表,前者一般可以支撑500W或者10G以内的数据,超过这个值则需要考虑分库分表。另外,一般大企业面试往往会从单机数据库问 ...
分类:
数据库 时间:
2016-12-09 07:44:23
阅读次数:
250
水平分库:当数据量巨大时,将数据放到不同的表中,比如表1,表2,表3,...; 垂直分库:当一张表的字段太多,可拆分出一张或多张分表,根据主键唯一标示; 新理解: 垂直分库:当一张表中字段不多,当某些字段长度过长,表占用空间很大,检索表的时候需要执行大量的IO(数据库检索的本质是对硬盘中的文件进行i ...
分类:
数据库 时间:
2016-12-06 14:28:54
阅读次数:
244
互联网应用在高并发情况下,瓶颈在 IO 上(网络 IO 和磁盘 IO 上),并不在 CPU 上,这时采用传统的多线程技术基本上无济于事。减少数据库磁盘 IO 时间最有效的办法是使用缓存,还可以将数据库弄成 master/slave 的读写分离,分表分库等等。减少网络 IO、静态资源磁盘 IO 有效的 ...
分类:
其他好文 时间:
2016-12-06 13:55:08
阅读次数:
183
其实很简单,就是利用正则表达式,从文件中抽取,可以用awk或sed,例如:1.抽取数据库imysql_1的全部SQL语句#假设数据库imysql_1的下一个是imysql_2DBNAME1="imysql_1"DBNAME2="imysql_2"sed-n“/^--CurrentDatabase:\`$DBNAME1\`/,/^--CurrentDatabase:\`$DBNAME2\`/p”imysql..
分类:
其他好文 时间:
2016-12-05 23:43:25
阅读次数:
191
mysql数据库分库备份脚本版本1fordbnamein`mysql-uroot-poldboy123-e"showdatabases;"|grep-Evi"database|informa|perfor"`domysqldump-uroot-poldboy123--events-B$dbname|gzip>/opt/bak/${dbname}_bak.sql.gzdone版本2#!/bin/bashMYUSER=rootMYPASS=oldboy123MYCMD="mysql..
分类:
数据库 时间:
2016-12-04 23:46:24
阅读次数:
348
介绍一些更美观的办法: spring中有一个AbstractRoutingDataSource的抽象类可以很好的支持多数据源,我们只需要继续它即可。 1 2 3 4 5 6 7 8 9 10 11 12 package com.cnblogs.yjmyzz.utils; import org.spr ...
分类:
其他好文 时间:
2016-12-04 14:14:46
阅读次数:
220
在之前的文章中,我介绍了分库分表的几种表现形式和玩法,也重点介绍了垂直分库所带来的问题和解决方法。本篇中,我们将继续聊聊水平分库分表的一些技巧。 分片技术的由来 关系型数据库本身比较容易成为系统性能瓶颈,单机存储容量、连接数、处理能力等都很有限,数据库本身的“有状态性”导致了它并不像Web和应用服务 ...
分类:
其他好文 时间:
2016-11-29 07:03:29
阅读次数:
232
详见:http://blog.yemou.net/article/query/info/tytfjhfascvhzxcyt332 全局序列号介绍 在实现分库分表的情况下,数据库自增主键已无法保证自增主键的全局唯一。为此,MyCat 提供了全局sequence,并且提供了包含本地配置和数据库配置等多种 ...
分类:
其他好文 时间:
2016-11-22 12:45:47
阅读次数:
232
转自:itfly8大型网站架构系列:电商网站架构案例(3) 本文章是电商网站架构案例的第三篇,主要介绍数据库集群,读写分离,分库分表,服务化,消息队列的使用,以及本电商案例的架构总结。 6.5数据库集群(读写分离,分库分表) 大型网站需要存储海量的数据,为达到海量数据存储,高可用,高性能一般采用冗余 ...
分类:
Web程序 时间:
2016-11-22 12:11:27
阅读次数:
226
第1章 引言 随着互联网应用的广泛普及,海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的互联网应用,每天几十亿的PV无疑对数据库造成了相当高的负载。对于系统的稳定性和扩展性造成了极大的问题。通过数据切分来提高网站性能,横向扩展数据层已经成为架构研发人员首选的方式。 水平切分数据库:可以降 ...
分类:
数据库 时间:
2016-11-22 03:02:30
阅读次数:
196