Mysql丢数据及主从数据不一致的场景 随着对MySQL的学习，发现了MySQL的很多问题，最重要的就是丢数据的问题。对于丢数据问题，我们应该了解丢数据的场景，这样在以后的学习中多考虑如何去避免及解决这些问题。 1.MySQL数据库层丢数据场景 本节我们主要介绍一下在存储引擎层上是如何会丢数据的。 ...
分类：
数据库 时间：
2019-03-17 14:09:56
阅读次数：
318
一.InnoDB 体系架构 1.1后台线程 master thread:刷新内存中的数据到磁盘 io thread:处理 IO 请求,AIO purge thread:清理undo 页的回收 page cleaner thread:刷新脏页 1.2内存 LRU list:最近最少使用算法管理缓冲池 ...
分类：
数据库 时间：
2019-03-13 19:49:05
阅读次数：
210
mysql主从经常会出现主从数据不同步的问题，脏数据会造成主从同步中断，出现大量ERROR，如1032，1062等错误。常规方法是逐条删除脏数据或者重做库，由于数据量大操作麻烦，而且主库在线上运行不能有锁表操作，各种不便特别费时间。笔者在生产环境遭遇了一次，情急之下用粗暴的方法不到10分种解决问题。下面假设一种情况，主库正常，从库数据不一致，解决思路步骤如下：1，对故障定性，通过查看最近日志来找出
分类：
数据库 时间：
2019-03-09 12:54:24
阅读次数：
214
在django2.0后，定义外键和一对一关系的时候需要加on_delete选项，此参数为了避免两个表里的数据不一致问题，不然会报错：TypeError: __init__() missing 1 required positional argument: 'on_delete'举例说明：user=m ...
分类：
数据库 时间：
2019-03-07 18:00:14
阅读次数：
214
事务,简单理解就是,一组动作,要么全部执行,要么就全部不执行.从而避免出现数据不一致的情况。 redis提供了简单的事务功能,将一组需要的命令放到multi和exec两个命令之间。multi代表事务开始，exec代码事务结束。 eg: 可以看到sadd命令一开始返回的结果是QUEUED,代表命令并没... ...
分类：
其他好文 时间：
2019-03-02 23:55:19
阅读次数：
316
近期遇到一个需求，mysql数据库中需要统计所有表的记录数据：查了下资料可以调取information_schema数据表中数据获取所有表记录总部，但是查询出来的数据，发现和手动统计的记录数据不一致，information_schema查询出来的数据部分不准确【原因应该是部分表数据没有自动同步】。折腾了下，于是还是自己手动写个脚本，分享下也做下次备用。程序结构:#!/bin/bash#Author
分类：
数据库 时间：
2019-02-19 11:43:30
阅读次数：
229
线程三线程安全对于多线程的系统来说，如果不加以限制的话，会造成数据安全等问题，对于数据安全问题会有如下问题：1、读取脏数据在读取数据的时候，数据被修改了，而程序读取的是修改过的或者没有修改过的，反正不是自己期望读取的数据的值。2、数据不一致在使用多线程进行数据处理的时候，最终得出来的数据每一次执行都不一样。3、数据错乱在数据的打印或者数组中，会造成数据的顺序错乱，对于关系可能会错乱。……对于数据的
分类：
编程语言 时间：
2019-02-15 10:32:17
阅读次数：
197
由于易语言与c#做的DESC加解密方式，返回的数据不一致，所以，我用易语言写了一个dll，供c#调用， 结果在post的时候，有时候能正确返回数据，有时候则不能正常返回，而是返回空数据（c#没有做异常处理） 后来， 在c#端抛出异常后发现，原来返回空值，都已经报错了（提示：尝试读取或写入受保护的内存 ...
前段时间工作中，有客户反应了系统中某类待办重复出现两次的情况。我核实了数据之后，分析认为是并发请求下导致的数据不一致性问题，并做了重现。其实这并不是一个需要频繁调用的功能，但是客户连续点击了两次，导致出现了并发问题。除了前端优化，这里重点探讨后台方面代码层面的处理，最终解决问题。 ...
分类：
Web程序 时间：
2019-01-28 01:32:19
阅读次数：
238
隔离级别按照下面表格的顺序，依次递增，并行能力依次递减。?脏读：只读到了其他事务回滚前的脏数据。即，当前事务读到了其他事务想要修改但没有修改成功的数据。不可重复读：当前线程在读取数据时，其他事务将数据改变了，导致两次读取到的数据不一致。幻读：当前线程在读取数据时，其他事务新增了新的数据，导致两次读取... ...
分类：
数据库 时间：
2019-01-25 16:04:07
阅读次数：
200
