针对最近面试被问到的问题,总结自己欠缺的知识点,并要在接下来的1年内加强这些知识:Java方面:反射、线程concurrent包;Spring方面:Ioc和Aop、事务;持久化框架:设计并实现分库分表、动态路由、线程池;缓存:集群设计(数据复制、考虑宕机等风险);常用设计模式;数据库:底层查询的实现...
分类:
编程语言 时间:
2014-12-03 21:06:41
阅读次数:
175
第1章? 引言 随着互联网应用的广泛普及,海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的 互联网应用,每天几十亿的PV无疑对数据库造成了相当高的负载。对于系统的稳定性和扩展性造成了极大的问题...
分类:
数据库 时间:
2014-12-01 17:48:58
阅读次数:
361
单库单表 单库单表是最常见的数据库设计,例如,有一张用户(user)表放在数据库db中,所有的用户都可以在db库中的user表中查到。 单库多表 随着用户数量的增加,user表的数据量会越来越大,当数据量达到一定程度的...
分类:
数据库 时间:
2014-11-28 12:46:56
阅读次数:
283
淘宝根据自己的业务特点开发了TDDL(Taobao Distributed Data Layer 外号:头都大了 ©_Ob)框架,主要解决了分库分表对应用的透明化以及异构数据库之间的数据复制,它是一个基于集中式配置的 jdbc datasource实现,具有主备,读写分离,动态数据库配置等功能。TD...
分类:
其他好文 时间:
2014-11-15 12:41:21
阅读次数:
284
1、分库分表很明显,一个主表(也就是很重要的表,例如用户表)无限制的增长势必严重影响性能,分库与分表是一个很不错的解决途径,也就是性能优化途径,现在的案例是我们有一个1000多万条记录的用户表members,查询起来非常之慢,同事的做法是将其散列到100个表中,分别从members0到members...
分类:
数据库 时间:
2014-11-08 23:29:09
阅读次数:
372
原文地址:http://zhidao.baidu.com/link?url=XSpNuOfhwos3bTWIQta3GsT87X81l_s2760bgw_MMAF7NhhxHJEaAOgzbhw1vtLSwKWkGOr_brHbZHTGm_skcBP8ZPhn424XjZgmxfBUlwO1 基本思...
分类:
数据库 时间:
2014-11-04 16:56:53
阅读次数:
153
关于未来网站访问速度及后台查询速度的优化建议:1、 数据库设计:数据库内所有表结构均添加索引
调整原因:
近日数据库压力很大,经查有些大数据量表的查询速度很慢,导致数据库服务器CPU一直持续90%-100%,将这些表添加索引后,CPU很快变正常。
2、 将大数据表做分库、分区处理:
具体操作如下:
1)、将大数据表与主数据库分离,单独新建一个数据库,然后将这些表做分区;
2)、将数据插入到消息队列内,后台利用windows计划任务执行(5分钟执行一次)C#控制台程序将消息队列内的数据批量(消息队列内有500...
分类:
Web程序 时间:
2014-10-26 10:24:20
阅读次数:
210
常见的数据库优化方法:索引(数据库),缓存,分表,分库,sql优化。索引:创建索引一般有以下两个目的:维护被索引列的唯一性和提供快速访问表中数据的策略。95% 的数据库能 问题都可以采用索引技术得到解决。索引有助于提高检索性能,但过多或不当的索引也会导致系统低 效。因为用户在表中每加进一个索引,数据...
分类:
数据库 时间:
2014-10-14 13:59:48
阅读次数:
252
第1章 引言随着互联网应用的广泛普及,海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的 互联网应用,每天几十亿的PV无疑对数据库造成了相当高的负载。对于系统的稳定性和扩展性造成了极大的问题。通过数据切分来提高网站性能,横向扩展数据层 已经成为架构研发人员首选的方式。水平切分数据库,可以降...
分类:
数据库 时间:
2014-10-12 18:27:48
阅读次数:
3081
单库单表单库单表是最常见的数据库设计,例如,有一张用户(user)表放在数据库db中,所有的用户都可以在db库中的user表中查到。单库多表随着用户数量的增加,user表的数据量会越来越大,当数据量达到一定程度的时候对user表的查询会渐渐的变慢,从而影响整个DB的性能。如果使用mysql,还有一个...
分类:
其他好文 时间:
2014-10-12 16:12:38
阅读次数:
219