背景 互联网产品中存在很多种类的数据,不同种类的数据对于存储系统的一致性,可用性,扩展性的要求是不同的。比如,金融、账号相关的数据对一致性要求比较高,社交类数据例如点赞对可用性要求比较高。还有一些大规模元数据存储场景,例如对象存储的索引层数据,对一致性,扩展性和可用性要求都比较高,这就需要底层存储系 ...
分类:
其他好文 时间:
2020-06-07 19:13:28
阅读次数:
59
1. 需求起因高并发场景下,需要使用redis做缓存,让请求先访问到redis,而不是直接访问MySQL等数据库。 2. 谁先谁后 3.可行方案 3.1 延迟双删+过期策略 3.2 缓存异步更新 (1) 应用直接写数据到数据库中。(2) 数据库更新binlog日志。(3) 利用Canal中间件读取b ...
分类:
数据库 时间:
2020-06-07 11:13:38
阅读次数:
83
备份与恢复过程都依赖归档日志,归档日志是保证数据一致性和完整性的重要保障。配有归档日志的数据库系统在出现故障时丢失数据的可能性更小,这是因为一旦出现介质故障如磁盘损坏时,利用归档日志,系统可被恢复至故障发生的前一刻,也可以还原到指定的时间点。
分类:
数据库 时间:
2020-06-06 23:27:35
阅读次数:
104
分布式一致性分布式场景下,多个服务同时对服务一个流程,比如电商下单场景,需要支付服务进行支付、库存服务扣减库存、订单服务进行订单生成、物流服务更新物流信息等。如果某一个服务执行失败,或者网络不通引起的请求丢失,那么整个系统可能出现数据不一致的原因。上述场景就是分布式一致性问题,追根到底,分布式一致性的根本原因在于数据的分布式操作,引起的本地事务无法保障数据的原子性引起。分布式一致性问题的解决思路有
分类:
其他好文 时间:
2020-06-06 09:16:57
阅读次数:
59
参考学习:https://www.cnblogs.com/nnngu/p/8627662.html#autoid-3-0-0 事务管理对于企业应用来说是至关重要的,当出现异常情况时,它也可以保证数据的一致性。 Spring事务管理的两种方式 spring支持编程式事务管理和声明式事务管理两种方式。 ...
分类:
编程语言 时间:
2020-06-05 14:57:17
阅读次数:
62
CAP定理 在分布式系统中,一致性、可用性、分区容错性最多只能同时实现两点。一致性,分布式系统所有数据备份是否相同。可用性,收到用户的请求,在时限内服务器必须给出明确的回应。分区容错性:大多数分布式系统都分布在多个子网络,每个子网络就叫做一个区。分区容错指分区间通信可能失败,比如,一台服务器放在中国 ...
分类:
其他好文 时间:
2020-06-04 20:07:18
阅读次数:
98
针对 open-falcon 与 nightingale 的调研 一、open-falcon 1.1 组件介绍 1.1.1 agent > agent用于采集机器负载监控指标,比如cpu.idle、load.1min、disk.io.util等等,每隔60秒push给Transfer。agent与T ...
分类:
其他好文 时间:
2020-06-04 19:34:44
阅读次数:
102
模板 函数模板 思考:如果重载的函数,其解决问题的逻辑是一致的、函数体语句相同,只是处理的数据类型不同,那么写多个相同的函数体,是重复劳动,而且还可能因为代码的冗余造成不一致性。 解决:使用模板 例:求绝对值函数的模板 函数模板定义语法 语法形式: template <模板参数表> 函数定义 模板参 ...
分类:
编程语言 时间:
2020-06-04 10:47:03
阅读次数:
77
1.函数的定义 将可能需要反复执行的代码封装为函数,并在需要该功能的地方进行调用,不仅可以实现代码复用,更重要的是可以保证代码的一致性,只需要修改函数代码则所有调用均受影响。 设计函数时,应注意提高模块的内聚性;同时降低模块之间的隐士耦合。 合理使用函数,规范编码 充分利用python函数式编程的特 ...
分类:
其他好文 时间:
2020-06-03 20:35:37
阅读次数:
88
1、什么是zookeeper? 1、zookeeper是一个分布式协调技术,是分布式数据一致性解决方案的典型代表,力求做到强一致性但最终实现的是最终一致性,采用CAP理论的AP,用来构建高可用分布式主备系统 2、zookeeper能干什么? 1、数据发布/订阅 2、命名服务 3、集群管理 4、Mas ...
分类:
其他好文 时间:
2020-06-03 13:54:41
阅读次数:
88