问题的出发点： 最近公司为了发展需要，要扩大对用户的信息采集，每个用户的采集量估计约3W。如果用户量增加的话，将会大量照成采集量成3W倍的增长，但是又要满足日常业务需要，特别是报表数据必要在规定的时间内完成。技术障碍：1. 面对用户量的增长，记录数3W倍的增长，如何保证这些记录能够在比较快的时间内进...
分类：
其他好文 时间：
2014-12-22 16:06:21
阅读次数：
156
1. 服务器资源 对于高并发情况下会有大量的运算，那么CPU的速度会直接影响到处理速度。 内存在大量数据处理的情况下，将会有较大的内存容量需求，可以用-Xmx -Xms -XX:MaxPermSize等参数对内存不同功能块进行划分。我们之前就遇到过内存分配不足，导致虚拟机一直处于full GC，.....
分类：
其他好文 时间：
2014-12-21 16:32:27
阅读次数：
161
这个问题比较常见，在高并发大数据传输时数据分包接收会乱在org.jboss.netty.handler.codec.frame包中，有LengthFieldBasedFrameDecoder类用来解析带有长度属性的包，只要我们在传输协议中加入包的总长度就行了（也许有更好的方法）具体方法：1.可在数据...
分类：
数据库 时间：
2014-12-19 19:05:56
阅读次数：
208
每一个模式描述了一个在我们周围不断重复发生的问题及该问题解决方案的核心。这样，你就能一次又一次地使用该方案而不必做重复工作。 所谓网站架构模式即为了解决大型网站面临的高并发访问、海量数据、高可靠运行灯一系列问题与挑战。为此，在实践中提出了许多解决方案，以实现网站高性能、高可靠性、易伸缩、可扩展、安....
分类：
Web程序 时间：
2014-12-19 18:52:15
阅读次数：
161
在前几篇将Java内存模型的那些事基本上把这个域底层的概念都解释清楚了，聊聊高并发（三十五）Java内存模型那些事（三）理解内存屏障 这篇分析了在X86平台下，volatile，synchronized, CAS操作都是基于Lock前缀的汇编指令来实现的，关于Lock指令有两个要点:
1. lock会锁总线，总线是互斥的，所以lock后面的写操作会写入缓存和内存，可以理解为在lock后面的写缓存...
分类：
移动开发 时间：
2014-12-19 13:08:25
阅读次数：
307
文章可能看不出来我在做什么事情，只是记录自己的一个排除死锁的过程。...
分类：
其他好文 时间：
2014-12-19 00:41:19
阅读次数：
185
在聊聊高并发（三十三）从一致性(Consistency)的角度理解Java内存模型 我们说了硬件层提供了满足某些一致性需求的能力，Java内存模型利用了硬件层提供的能力指定了一系列的语法和规则，让Java开发者可以隔绝这种底层的实现专注于并发逻辑的开发。这篇我们来看看硬件层是如何提供这些实现一致性需求的能力的。
硬件层提供了一系列的内存屏障 memory barrier / memory...
分类：
其他好文 时间：
2014-12-18 16:59:45
阅读次数：
1682
存储引擎支持的锁定MyISAM表级锁MEMORY表级锁InnoDB行级锁BDB页面锁表级锁：开销小，加锁快；不会出现死锁；锁定粒度大，发生锁冲突的概率最高,并发度最低。行级锁：开销大，加锁慢；会出现死锁；锁定粒度最小，发生锁冲突的概率最低,并发度也最高。页面锁：开销和加锁时间界于表锁和行锁之间；会出...
分类：
数据库 时间：
2014-12-18 14:58:27
阅读次数：
286
高并发访问的核心原则其实就一句话“把所有的用户访问请求都尽量往前推”。如果把来访用户比作来犯的"敌人"，我们一定要把他们挡在800里地以外，即不能让他们的请求一下打到我们的指挥部（指挥部就是数据库及分布式存储）。 如：能缓存在用户电脑本地的，就不要让他去访问CDN。 能缓存CDN服务器上的，就不要让...
分类：
Web程序 时间：
2014-12-18 01:38:21
阅读次数：
225
nginx以高并发，省内存著称。相信大多数安装nginx的同学都想知道自己的nginx性能如何。我想跟大家分享下我使用ab工具的压力测试方法和结果，ab是针对apache的性能测试工具，可以只安装ab工具。ubuntu安装abapt-get install apache2-utilscentos安装...
分类：
其他好文 时间：
2014-12-17 16:05:53
阅读次数：
373
