SQL性能下降的原因 查询语句写的不好 索引失效 关联查询太多 服务器调优及各个参数的的设置（缓冲、线程数等等） 常见的JOIN查询 1、SQL的执行顺序 手写的顺序： 真正机器执行的顺序： 2、七种join查询 最后两种语法mysql不支持，但是我们可以用union来联合其他的查询结果来拼凑出最终 ...
分类：
其他好文 时间：
2020-01-27 17:27:23
阅读次数：
61
概述 Spark 作为一个基于内存的分布式计算引擎，其内存管理模块在整个系统中扮演着非常重要的角色。理解 Spark 内存管理的基本原理，有助于更好地开发 Spark 应用程序和进行性能调优。本文旨在梳理出 Spark 内存管理的脉络，抛砖引玉，引出读者对这个话题的深入探讨。本文中阐述的原理基于 S ...
分类：
其他好文 时间：
2020-01-26 19:27:55
阅读次数：
76
概述 垃圾收集 Garbage Collection 通常被称为“GC”，它诞生于1960年 MIT 的 Lisp 语言，经过半个多世纪，目前已经十分成熟了。 jvm 中，程序计数器、虚拟机栈、本地方法栈都是随线程而生随线程而灭，栈帧随着方法的进入和退出做入栈和出栈操作，实现了自动的内存清理，因此， ...
分类：
其他好文 时间：
2020-01-26 19:18:20
阅读次数：
90
JVM的结构图 Java内存结构 JVM内存结构主要有三大块：堆内存、方法区和栈。 堆内存是JVM中最大的一块由年轻代和老年代组成，而年轻代内存又被分成三部分，Eden空间、From Survivor空间、To Survivor空间,默认情况下年轻代按照8:1:1的比例来分配； 方法区存储类信息、常 ...
分类：
其他好文 时间：
2020-01-26 19:10:01
阅读次数：
68
前言 在大数据计算领域，Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型的计算操作，应用范围与前景非常广泛。在美团?大众点评，已经有很多同学在各种项目中尝试使用Spark。大多数同学 ...
分类：
其他好文 时间：
2020-01-26 19:02:37
阅读次数：
63
以MySQL为例 如何定位并优化慢查询Sql？ 联合索引的最左匹配原则的成因？ 索引是建立得越多越好吗？ 一、如何定位并优化慢查询Sql？ 根据慢日志定位慢查询sql 使用explain等工具分析sql 修改sql或者尽量让sql走索引 查看mysql变量 SHOW VARIABLES LIKE ' ...
分类：
数据库 时间：
2020-01-25 20:43:38
阅读次数：
106
1.1.1 配置调优 通过调节配置参数，达到较优的性能。Map配置参数 属性 类型 默认值 作用 mapreduce.Task.io.sort.mb Int 100 Map输出结果的缓冲区大小兆为单位 mapreduce.map.sort.spill.percent Float 80 缓冲区占用比例 ...
分类：
其他好文 时间：
2020-01-24 16:06:03
阅读次数：
91
昇腾AI软件栈提供了计算资源、性能调优的运行框架以及功能多样的配套工具，是一套完整的解决方案，可以使昇腾AI处理器发挥出极佳的性能。 昇腾AI软件栈可以分为神经网络相关软件模块、工具链以及其它软件模块。 · 神经网络软件主要包含了流程编排器（Matrix），框架管理器（Framework），运行管理 ...
分类：
其他好文 时间：
2020-01-22 22:18:47
阅读次数：
124
jvm调优实战 前端时间把公司的一个分布式定时调度的系统弄上了容器云，部署在kubernetes，在容器运行的动不动就出现问题，特别容易jvm溢出，导致程序不可用，终端无法进入，日志一直在刷错误，kubernetes也没有将该容器自动重启。业务方基本每天都在反馈task不稳定，后续就协助接手看了下， ...
分类：
其他好文 时间：
2020-01-21 10:58:05
阅读次数：
97
有很多初级程序员会把Tomcat仅仅当做一个工具，而忽略了它的重要性。对于一个最简单的Web项目架构来说，Tomcat是前军，SSM是中军，Mysql是后方，而我们通常非常重视SSM框架的学习，而忽略Tomcat，如果能够多懂得关于Tomcat的底层原理知识，那么对于日常开发工作或项目性能调优是非常重要的。比如：我们通常都知道Tomcat是一个Servlet容器，那么它到底是怎么实现Servlet
分类：
其他好文 时间：
2020-01-21 09:13:27
阅读次数：
319
