实现MySQL读写分离 1.1 问题 本案例要求配置2台MySQL服务器+1台代理服务器,实现MySQL代理的读写分离: 用户只需要访问MySQL代理服务器,而实际的SQL查询、写入操作交给后台的2台MySQL服务器来完成 其中Master服务器允许SQL查询、写入,Slave服务器只允许SQL查询 ...
分类:
数据库 时间:
2018-01-19 20:50:43
阅读次数:
271
1. 如果 Spark 中 CPU 的使用率不够高,可以考虑为当前的程序分配更多的 Executor, 或者增加更多的 Worker 实例来充分的使用多核的潜能 2. 适当设置 Partition 分片数是非常重要的,过少的 Partition 分片数可能会因为每个 Partition 数据量太大而 ...
分类:
其他好文 时间:
2018-01-19 20:22:58
阅读次数:
167
解决方法: 将driver_executor和executor_memory调大,调节原则:使用的资源有多大,就尽量去调节到最大的大小。 2、spark汇聚数据到hbase失败 解决办法: hive.Context.setConf("parquet.memory.min.chunk.size","1 ...
分类:
其他好文 时间:
2018-01-19 11:48:21
阅读次数:
1625
先阅读apache配置优化建议如下,再对相关参数进行调整,观察服务器状况.Apache配置优化建议:进入/usr/local/apache2/conf/extra 目录下Apache优化,经过上述操作后,Apache已经能够正常运行。但是,对于访问量稍大的站点,Apache的这些默认配置是无法满足需 ...
分类:
Web程序 时间:
2018-01-17 11:26:36
阅读次数:
189
本次性能调优项目中由于涉及的环节较多,最好能够将生成环境中的所有内容进行监控,同时考虑最低开销,这样就从应用服务器和数据库服务器两个服务器进行,以nmon作为监控基础数据,同时监控JVM和数据库告警和快照。所有监控的内容都是手段,只有从海量的监控日志中得到规律性、有意义的数据才是性能优化的基础。有了数据就是对数据的分析,本文将首先介绍需要获取的数据,内容也将是我从项目获取的经验。基础环境:两台数据
分类:
数据库 时间:
2018-01-15 22:19:28
阅读次数:
263
原文:一文教会你数据库性能调优(附某大型医院真实案例)前言 微软工程师的一个工程师曾经对性能调优有一个非常形象的比喻:剥洋葱 。我也非常认可,让我们来一层一层拨开外面它神秘的面纱。 六大因素 下面祭出的是我们在给客户分析数据库性能问题最常用的图。 看完这个图,你是不是对性能调优有了个基本的概念了.通... ...
分类:
数据库 时间:
2018-01-15 18:54:07
阅读次数:
254
转自http://bbs.hfteams.com/forum.php?mod=viewthread&tid=11&extra=page%3D1HAProxy+Varnish+LNMP实现高可用负载均衡动静分离集群部署HAProxy高可用负载均衡集群部署基本信息:系统平台:VMwareWorkStation系统版本:CentOSLinuxrelease7.2.1511(Core)内核
分类:
其他好文 时间:
2018-01-15 15:28:02
阅读次数:
160
微软工程师的一个工程师曾经对性能调优有一个非常形象的比喻:剥洋葱 。我也非常认可,让我们来一层一层拨开外面它神秘的面纱。时间:2018年1月某天 事件:某医院客户 下午4点 突然出现大面积的卡慢。整个系统出现严重问题,信息中心电话打爆,医院工程师手足无措。万幸的是我们给数据库装了‘摄像头’,下面就从... ...
分类:
数据库 时间:
2018-01-15 11:05:46
阅读次数:
191
Vainish是一款高性能且开源的反向代理服务器和http加速器。与传统的squid相比,Varnish具有性能更高、速度更快等诸多优点。Varnish服务器--/etc/varnish????? #配置文件目录?/etc/init.d/varnish?? #varnish的启动程序?/etc/sysconf
分类:
其他好文 时间:
2018-01-14 15:19:09
阅读次数:
185