原文: 第十六章——处理锁、阻塞和死锁（1）——确定长时间运行的事务 前言： 事务是OLTP系统中的主要部分。它管理数据一致性和数据并发问题，当多个资源同时被读取或者修改相同数据时，SQLServer会通过锁定机制来确保数据库中的数据总是处于一个有效状态。在SQLServer中，锁管理器是负责实现这...
分类：
其他好文 时间：
2015-03-06 15:50:02
阅读次数：
145
原文:http://www.infoq.com/cn/articles/etcd-interpretation-application-scenario-implement-principleetcd使用了更易懂的raft数据一致性协议, 比paxos容易理解的多. 本文对etcd的使用场景和原理做...
分类：
其他好文 时间：
2015-02-25 10:13:50
阅读次数：
178
数据库事务(Database Transaction)
，是指作为单个逻辑工作单元执行的一系列操作，要么完全地执行，要么完全地不执行。事务处理可以确保除非事务性单元内的所有操作都成功完成，否则不会永久更新面向数据的资源。通过将一组相关操作组合为一个要么全部成功要么全部失败的单元，可以简化错误恢复并使应用程序更加可靠。一个逻辑工作单元要成为事务，必须满足所谓的ACID（原子性、一致性、隔离性和持久...
分类：
数据库 时间：
2015-02-03 19:35:48
阅读次数：
186
MongoDB支持在多个机器中通过异步复制达到故障转移和实现冗余。多机器中同一时刻只有一台机器是用于写操作，正因为如此，MongoDB提供了数据一致性的保障。而担当primary角色的机器，可以把读的操作分发给slave。 MongoDB高可用分两种： Master-Slave 主从复制 ...
分类：
数据库 时间：
2015-01-24 12:49:54
阅读次数：
275
多线程共享变量的情况下，为了保证数据一致性，往往需要对这些变量的访问进行加锁。而锁本身又会带来一些问题和开销。Immutable Object模式使得我们可以在不使用锁的情况下，既保证共享变量访问的线程安全，又能避免引入锁可能带来的问题和开销。Immutable Object模式简介多线程环境中，一...
分类：
其他好文 时间：
2015-01-17 12:31:23
阅读次数：
191
资源预估
预估数据量、算法的时间、空间复杂度
依据预估的结果分配合理的资源(内存，CPU),避免资源不够用。
避免数据脏读
自动脚本处理大量数据速度快，尤其有写操作的任务，数据一致性在分布式环境下往往难以保证。这种情况下应该避免数据脏读，比如数据库会有主从复制同步延迟的现象，这时应该强制连接数据库主库。
幂等性
有写操作的脚本，需要考虑脚本执行的幂等性，即在参入相同参数...
分类：
其他好文 时间：
2015-01-16 19:14:19
阅读次数：
245
SQL Server复制入门(一)----复制简介简介 SQL Server中的复制(Replication)是SQL Server高可用性的核心功能之一,在我看来，复制指的并不仅仅是一项技术，而是一些列技术的集合,包括从存储转发数据到同步数据到维护数据一致性。使用复制功能不仅仅需要你对业务的熟悉，...
分类：
数据库 时间：
2015-01-12 10:48:19
阅读次数：
189
数据库的集中控制优点:降低存储数据的冗余度更高的数据一致性存储的数据可以共享可以建立数据库所遵循的标准便于维护数据完整性能够实现数据的安全性数据在数据库中的存储形式:1、层次模型：这种模型提供一种相对简单的结构，单个记录以父子关系组织在一起，形成一个倒挂的树。树创建了一个层次状结构，在其中数据被分解...
分类：
数据库 时间：
2015-01-10 17:56:04
阅读次数：
459
王曰芬 章成志 张蓓蓓 吴婷婷 定义：数据清洗是指发现并纠正数据文件中可识别的错误的最后一道程序，包括检查数据一致性，处理无效值和缺失值等。与问卷审核不同，录入后的数据清理一般是由计算机而不是人工完成。 目的：数据清洗的目的是为信息系统提供准确而有效的数据。 基本原理：利用有关技术,如统计方法、数据...
分类：
其他好文 时间：
2015-01-02 22:25:20
阅读次数：
309
相信很多人的线上都搭建了MySQL主从这样的框架，很多人只监控MySQL的从服务器Slave_IO和Slave_SQL这两个线程是否为YES，还有Seconds_Behind_Master延迟大不大之类的一些信息。但他们是否定期的去检查MySQL主服务器的数据和从服务器的数据是否一致呢，数据一致性才...
分类：
其他好文 时间：
2014-12-30 10:02:12
阅读次数：
294
