使用 uptime 查看 系统负载情况 load average: 依次则是过去 1 分钟、5 分钟、15 分钟的平均负载 简单来说,平均负载是指单位时间内,系统处于 可运行状态 和不可中断状态 的平均进程数,也就是平均活跃进程数,它和 CPU 使用率并没有直接关系。 所谓可运行状态的进程,是指正在 ...
分类:
系统相关 时间:
2019-09-15 16:46:37
阅读次数:
141
1Fetch抓取Fectch抓取是指对某些情况下的查询不必使用MapReduce计算将hive.fetch.task.conversion设置成more,在全局查找、字段查找、limit查找等都不走MapReduce2本地模式多数的HadoopJob是需要Hadoop提供的完整的可扩展性来处理大数据集的,不过,有时Hive的输入数据量是非常小的,在这种情况下,为查询触发执行任务消耗的时间可能会比实
分类:
其他好文 时间:
2019-09-13 17:21:44
阅读次数:
105
序言Kakfa MirrorMaker是Kafka 官方提供的跨数据中心的流数据同步方案。其实现原理,其实就是通过从Source Cluster消费消息然后将消息生产到Target Cluster,即普通的消息生产和消费。用户只要通过简单的consumer配置和producer配置,然后启动Mirr ...
分类:
其他好文 时间:
2019-09-11 19:46:10
阅读次数:
81
MySQL 运行状态及调优 1.查看MySQL服务器配置信息mysql> show variables; 2.查看MySQL服务器运行的各种状态值mysql> show global status; 3.慢查询mysql> show variables like '%slow%'; + + + | ...
分类:
数据库 时间:
2019-09-11 17:56:57
阅读次数:
97
***explain ****分析******* 1观察,至少跑一天,看看生产的慢SQL情况 2开启慢查询日志,设置阙值,比如超过5秒钟的就是慢SQL,并将它抓取出来 3explain+慢SQL分析 4show profile 5运维经理 or DBA,进行SQL数据库服务器的参数调优 *****总 ...
分类:
数据库 时间:
2019-09-11 09:56:57
阅读次数:
112
阅读本文大概需要 8 分钟。 阅读本文大概需要 8 分钟。 来源:京东技术订阅号(ID:jingdongjishu) 作者:张sir 京东到家订单中心系统业务中,无论是外部商家的订单生产,或是内部上下游系统的依赖,订单查询的调用量都非常大,造成了订单数据读多写少的情况。 我们把订单数据存储在MySQ ...
分类:
数据库 时间:
2019-09-10 10:23:00
阅读次数:
133
Reference: https://time.geekbang.org/column/article/108139 参考指标 GC频率:?频的FullGC会给系统带来?常?的性能消耗,虽然MinorGC相对FullGC来说好了许多,但过多的MinorGC仍会给系统带来压?。 内存:这?的内存指的是 ...
分类:
其他好文 时间:
2019-09-08 20:18:13
阅读次数:
131
Reference:https://time.geekbang.org/column/article/107396 GC算法 JVM提供了不同的回收算法来实现这?套回收机制,通常垃圾收集器的回收算法可以分为以下?种: 如果说收集算法是内存回收的?法论,那么垃圾收集器就是内存回收的具体实现,JDK1. ...
分类:
其他好文 时间:
2019-09-08 20:01:21
阅读次数:
97
整个换脸过程中模型是最重要的一部分,耗时久,调优难,很多人虽然一直在跑模型,却并不知道每个模型的特点。 我也常常被问及: 到底用哪个模型换脸效果最好? H128和DF有什么差别? H64和H28有什么不同? SAE是最好的吗? 全脸和半脸是什么意思? 等等问题。 今天,就专门写一篇文章,来统一解答这 ...
分类:
其他好文 时间:
2019-09-07 01:00:08
阅读次数:
512
一、数据库性能瓶颈主要原因 1、数据库连接 MySQL数据库默认连接为100,我们可以通过配置initialSize、minIdle、maxActive等进行调优,但由于硬件资源的限制,数据库连接不可能无限制的增加,对大型单体应用单实例数据库可能会出现最大连接数不能满足实际需求的情况,这时就会系统业 ...
分类:
数据库 时间:
2019-09-04 10:16:05
阅读次数:
132