hbase调优 一.表的设计 1.设置预分区表 原因:前期region读写都集中到一个regionserver上,直到文件足够大时,才进行分区,这样会降低性能. 解决方案:建表是设置预分区,这样当数据写入HBase时，会按照region分区情况，在集群内做数据的负载均衡。 public static ...
分类：
其他好文 时间：
2019-12-30 14:28:10
阅读次数：
76
性能测试分为： 1. 负载测试 在一定软硬件环境下，通过不断加大负载（不同虚拟用户数）来确定在满足性能指标情况下能够承受的最大用户数。简单说，可以帮我们对系统进行定容定量，找出系统性能的拐点，给予生产环境规划建议。这里的性能指标包括TPS（每秒事务数）、RT（事务平均响应时间）、CPU Uing（C ...
分类：
其他好文 时间：
2019-12-29 12:57:50
阅读次数：
73
一、HBase的RK设计 HBase读写数据大多数是通过RK，MemStore/HFile存储也是按照字典顺序排列的RK存储，所以要关注RK。 RowKey设计原则： 1）长度原则： RowKey不应该超过16字节，因为若是过长再以KV形式存储，对于HFile和MemStore来说会极大的占用存储空 ...
分类：
其他好文 时间：
2019-12-28 20:38:27
阅读次数：
91
1.指定使用JDK的路径和vm参数配置 修改bin文件中的catalina.bat，大约95行setlocal之上加入如下内容： set JAVA_OPTS=-Xms1024m -Xmx1024m -XX:PermSize=256M -XX:MaxPermSize=512M//配置vm参数，根据系统 ...
参考: hive参数: https://www.cnblogs.com/yinzhengjie/articles/11065409.html hive-site.xmlhive.async.log.enabled false #控制beeline跑时是否输出执行日志,默认是true hive:hiv ...
分类：
其他好文 时间：
2019-12-27 21:59:12
阅读次数：
76
文章转自：原创： 杨建旭，https://mp.weixin.qq.com/s/ZtwKmG3xCsTShJni6xTCmw 对于物理机来说，CPU有socket、Core、thread的概念，一个linux虚拟机上面同样有这些信息，这些信息是什么含义，和物理机之间有多少对应关系呢？如何分配CPU拓 ...
分类：
其他好文 时间：
2019-12-27 15:30:19
阅读次数：
337
程序员进阶很慢？七点java程序员进阶必备技能，让你少走弯路 一、架构师筑基必备技能 阿里面试更多的内容是架构师基础内容，比如并发编程的AQS、CAS等，多纬度提升架构基础，并发编程高级进阶，JVM性能深度调优，网络编程与高效IO，深入Tomcat底层，Mysql深度优化实战，架构师必备Linux ...
分类：
编程语言 时间：
2019-12-26 21:10:05
阅读次数：
85
Nginx配置参数优化Nginx作为高性能web服务器，即使不特意调整配置参数也可以处理大量的并发请求。以下的配置参数是借鉴网上的一些调优参数，仅作为参考，不见得适于你的线上业务。worker进程worker_processes该参数表示启动几个工作进程，建议和本机CPU核数保持一致，每一核CPU处理一个进程。worker_rlimit_nofile它表示Nginx最大可用的文件描述符个数，需要配
分类：
其他好文 时间：
2019-12-25 17:41:20
阅读次数：
104
Tomcat性能调优： 找到Tomcat根目录下的conf目录，修改server.xml文件的内容。对于这部分的调优，我所了解到的就是无非设置一下Tomcat服务器的最大并发数和Tomcat初始化时创建的线程数的设置，当然还有其他一些性能调优的设置，下图是我根据我机子的性能设置的一些参数值，给各位详 ...
分类：
其他好文 时间：
2019-12-24 18:48:43
阅读次数：
88
刚好用到，转自http://blog.csdn.net/sinat_29581293/article/details/70214436 有空再整理： 先jps -ml 再sudo -u hive /usr/java/latest/bin/jstack 19661（此为进程号） > /tmp/jsta ...
分类：
Web程序 时间：
2019-12-24 15:34:12
阅读次数：
127
