事故 前些天上线的扫码送会员活动。 场景:用户登录账号之后,扫二维码,送七天黄金会员,限制每个帐号只能领取一个 有恶意用户刷接口,在高并发下越过限制。 原因 高并发下模拟几个线程同时请求 现在的rpc服务,除去极其敏感性数据的操作,其它数据的接口基本都没有做数据一致性控制。 其实做了控制也不能解决这 ...
分类:
其他好文 时间:
2017-05-23 17:23:57
阅读次数:
212
分页:解决内存利用效率问题。 分段:解决进程安全、访问控制、数据一致性问题。 http://blog.csdn.net/bupt_tinyfisher/article/details/8939689 1.基本思想: 分页系统能有效地提高内存的利用率,而分段系统能反映程序的逻辑结构,便于段的共享与保护 ...
分类:
其他好文 时间:
2017-05-23 12:18:54
阅读次数:
148
【教你看懂redis配置 – 简介】 我们可以在启动redis-server时指定应该加载的配置文件,方法如下: 复制代码 代码如下: $ ./redis-server /path/to/redis.conf 接下来,我们就来讲解下redis配置文件的各个配置项的含义,注意,本文是基于redis-2 ...
分类:
其他好文 时间:
2017-05-18 17:27:34
阅读次数:
150
了解事务和锁 事务:保持逻辑数据一致性与可恢复性,必不可少的利器。 锁:多用户访问同一数据库资源时,对访问的先后次序权限管理的一种机制,没有他事务或许将会一塌糊涂,不能保证数据的安全正确读写。 死锁:是数据库性能的重量级杀手之一,而死锁却是不同事务之间抢占数据资源造成的。 不懂的听上去,挺神奇的,懂 ...
分类:
数据库 时间:
2017-05-16 15:51:38
阅读次数:
279
一致性问题一般是指数据前后之间的逻辑关系是否一致(正确和完整)。简单举例来说,比如A用户正在写数据N的时候,B用户开始读数据N,由于A用户刚写了一半,所以B用户读的数据就不是前后逻辑一致性的,这就是一致性问题的一种。一致性问题在各个领域都存在,提的比较多的是分布..
分类:
其他好文 时间:
2017-05-16 14:45:10
阅读次数:
134
Guava是一个很方便的本地缓存工具,但是在多节点处理的过程中,本地缓存无法满足数据一致性的问题。分布式缓存Ignite很好的解决了数据一致性,可靠性,事务性等方面的问题。 Ignite支持分区方式和复制方式存储数据,侧重于不同读写比例的分布式缓存使用。同时,Ignite可以缓存整个数据库数据,支持 ...
分类:
其他好文 时间:
2017-05-14 23:44:02
阅读次数:
313
同事最近在忙数据一致性比对工作,需要对不同文本文件中的数据进行比对,有的文件较大,记录较多,如果用普通的文本编辑器打开的话,很显然,会很卡,甚至打不开。 基于此,可将该文本文件的数据导入到数据库中,在集合的层面进行比对。 那么如何将文本文件的数据导入到数据库中呢?在这里,主要利用了Oracle的外部 ...
分类:
数据库 时间:
2017-05-10 21:58:56
阅读次数:
304
ALE技术:应用链接支持(ApplicationLinkEnabling简称ALE),是一项用于创建和运行分布式应用的技术。ALE是SAP的专有技术。ALE对象——ALE包含了可控的数据消息交换,可以确保松散耦合的应用程序之间的数据一致性。ALE由三层组成,应用服务、分发服务和通信服务。ALE的基本原理..
分类:
其他好文 时间:
2017-05-07 10:30:10
阅读次数:
357
使用Hadoop来分析和处理数据需要将数据加载到集群中并且将它和企业生产数据库中的其他数据进行结合处理。从生产系统加载大块数据到Hadoop中或者从大型集群的map reduce应用中获得数据是个挑战。用户必须意识到确保数据一致性,消耗生产系统资源,供应下游管道的数据预处理这些细节。用脚本来转化数据 ...
分类:
Web程序 时间:
2017-05-05 01:01:44
阅读次数:
235
多线程共享变量的情况下,为了保证数据一致性,往往需要对这些变量的访问进行加锁。而锁本身又会带来一些问题和开销。Immutable Object模式使得我们可以在不使用锁的情况下,既保证共享变量访问的线程安全,又能避免引入锁可能带来的问题和开销。 Immutable Object模式简介 多线程环境中 ...
分类:
编程语言 时间:
2017-05-04 01:39:49
阅读次数:
246