在PHP+MYSQL架构网站运行过程中，往往会遇到各种性能问题影响，如MySQL、PHP、CPU、磁盘IO、缓存等，其中MySQL瓶颈就是最常见也最难解决的一种影响网站性能的因素；通常，我们会使用redis、memcached等缓存软件来缓存内容，这确实是最优的解决方案之一，但这需要网站程序的支持，然而多数常用网站程序并不支持或者不能完美支持这些缓存软件，今天我们就来谈谈如何通过MySQL自身的配
分类：
数据库 时间：
2020-03-03 12:54:13
阅读次数：
125
问题项目使用spring-kafka操作消费kafka近期出现消费速度变慢，consumer消费一条数据平均需要200ms的时间，并且频繁发生，consumer会停止消费十几秒。日志分析以下为日志记录，consumer会时长从消费组中掉出再重新加入o.a.k.c.c.i.AbstractCoordinator:542-Markingthecoordinator127.0.0.1:9092(id:2
分类：
其他好文 时间：
2020-02-28 19:02:51
阅读次数：
461
一般我们为了确保系统的稳健运行，都会对系统运行时的各个指标进行收集，如CPU使用率，内存使用率，磁盘IO，网络延迟，应用心跳等。进行实时监控，通过对这些数据的监控，使我们能够在出现问题时第一时间通知开发/运维人员进行处理，或者触发某些自动化操作，以确保在用户还没有察觉到问题之前处理完故障和异常，以系统的稳定运行。
分类：
其他好文 时间：
2020-02-21 20:09:27
阅读次数：
114
引自[https://www.iteye.com/blog/langyu 992916] shuffle的意义有三点： 1.把map task端的数据完整传输到reduce task端 2.减少不必要的宽带消耗 3.减少磁盘IO消耗 首先把Shuffle理解为map的shuffle和reduce的s ...
分类：
其他好文 时间：
2020-02-20 13:13:52
阅读次数：
65
磁盘IO和网络IO该如何评估、监控、性能定位和优化生产中经常遇到一些IO延时长导致的系统吞吐量下降、响应时间慢等问题，例如交换机故障、网线老化导致的丢包重传；存储阵列条带宽度不足、缓存不足、QoS限制、RAID级别设置不当等引起的IO延时。一、评估IO能力的前提评估一个系统IO能力的前提是需要搞清楚这个系统的IO模型是怎么样的。那么IO模型是什么，为什么要提炼IO模型呢？（一）、IO模型在实际的业
分类：
其他好文 时间：
2020-02-17 13:57:08
阅读次数：
76
线上系统突然变得卡顿或无法访问，排除网络异常的情况下，检查服务器资源占用情况，如果CPU、内存、磁盘IO等资源占用过高，就会导致无法继续处理HTTP请求。 如果是CPU占用飙高，有可能是程序中存在死循环、死锁导致的，也有可能是内存紧张从而频繁GC导致的，要具体问题具体分析。 排查过程 这里记录一次线 ...
分类：
其他好文 时间：
2020-02-06 11:07:57
阅读次数：
75
1. 安装nginx 1.1 选择稳定版本 我们编译安装nginx来定制自己的模块，机器CentOS 6.2 x86_64。首先安装缺少的依赖包： # yum -y install gcc gcc-c++ make libtool zlib zlib-devel openssl openssl-de ...
分类：
其他好文 时间：
2020-02-05 20:11:26
阅读次数：
287
1. 下列哪项通常是集群的最主要瓶颈（C） A. CPU B. 网络 C. 磁盘IO D. 内存 2. 下列哪项可以作为集群的管理工具？（C） A.Puppet B.Pdsh C.ClouderaManager D.Zookeeper 3. 下列哪个是Hadoop 运行的模式？（ABC） A. 单机 ...
分类：
其他好文 时间：
2020-02-05 18:41:15
阅读次数：
95
当想要知道某个进程在进行什么样的系统调用时，可以用strace进行追踪； 使用场景：常用于查看磁盘IO问题时（磁盘IO异常）的文件定位 安装：yum install strace -y 常用选项： -p：指明进程的pid -f：也查看线程（默认只查看进程的） -e：指定要查看哪个函数的系统调用 例： ...
分类：
编程语言 时间：
2020-02-01 12:21:48
阅读次数：
117
上一片文章我们讲过了，B 树索引是 MySql 常用引擎（InnoDB，MyISAM）的索引。 提出问题 什么是 B 树，它有什么特性那？B+ 树与 B 树有什么区别？我们平常用的二叉搜索树的时间复杂度不是 LogN 吗？难道不够优秀吗？ 解决问题 预备知识 磁盘 IO：系统读取磁盘是将磁盘的基本单 ...
分类：
数据库 时间：
2020-01-31 12:12:54
阅读次数：
77
