● 系统环境说明 Linux环境:centos7.4 EMR:3.0.0 Java:1.8.0_112 ● 集群配置 机器数量:50 内存:128G 硬盘:100T CPU核心数:32C 问题 SQL中使用了LEFT JOIN,在执行过程中遇到以下报错: java.lang.RuntimeExcep ...
分类:
其他好文 时间:
2020-07-17 01:24:45
阅读次数:
119
先要对宿主机增大cpu数量 加到4处理器、2内核、8线程 查看 CPU 物理个数 grep 'physical id' /proc/cpuinfo | sort -u | wc -l 查看 CPU 核心数量 grep 'core id' /proc/cpuinfo | sort -u | wc -l ...
分类:
其他好文 时间:
2020-07-12 10:36:41
阅读次数:
75
1、主配置段常用参数 user username 指定用于运行worker进程的用户,默认和在编译nginx是指定--user参数有关 worker_processes auto worker进程的个数,通常应该为物理CPU核心数量减1或者减2,worker_processes auto;可以根据物 ...
分类:
其他好文 时间:
2020-07-12 01:02:20
阅读次数:
64
用简单代码模拟vue数据监听原理 // 核心数据响应式方法 function defineReactive(obj,key,val){ // val可能还是个对象,需要递归一下 objserve(val) Object.defineProperty(obj,key,{ get(){ return v ...
分类:
其他好文 时间:
2020-07-05 22:59:30
阅读次数:
76
目录: 1、Nginx运行工作进程数量 Nginx运行工作进程个数一般设置CPU的核心或者核心数x2。如果不了解cpu的核数,可以top命令之后按1看出来,也可以查看/proc/cpuinfo文件 grep ^processor /proc/cpuinfo | wc -l [root@lx~]# v ...
分类:
其他好文 时间:
2020-07-01 16:11:18
阅读次数:
53
Nginx进程间的关系 在正式的产品环境中,Nginx都是使用一个master进程来管理多个worker进程,一般情况下,worker进程的数量和服务器的CPU核心数一致,每一个worker进程都是繁忙的,它们是nginx中真正的提供互联网服务的进程,相比之下,master进程则是很清闲的,它只负责 ...
分类:
系统相关 时间:
2020-06-30 16:02:04
阅读次数:
70
©著作权归作者所有:来自51CTO博客作者大飞侠大虾的原创作品 mark一下 性能相关配置 worker_processes number | auto; worker进程的数量;通常应该为当前主机的cpu的物理核心数 worker_cpu_affinity auto [cpumask] #将wor ...
分类:
其他好文 时间:
2020-06-27 11:58:47
阅读次数:
96
一、简介 1.1 多数据源支持 Spark 支持以下六个核心数据源,同时 Spark 社区还提供了多达上百种数据源的读取方式,能够满足绝大部分使用场景。 CSV JSON Parquet ORC JDBC/ODBC connections Plain-text files 注:以下所有测试文件均可从 ...
分类:
数据库 时间:
2020-06-26 18:39:56
阅读次数:
61
记录nginx配置文件的配置项 # Nginx 默认配置文件nginx.conf中文详解 #定义Nginx运行的用户和用户组 #user nobody; #nginx进程数,建议设置为等于CPU总核心数。 worker_processes 1; #全局错误日志定义类型,[ debug | info ...
分类:
其他好文 时间:
2020-06-22 17:09:37
阅读次数:
56
ConcurrentHashMap源码解析 ConcurrentHashMap是什么? 它是对HashMap线程安全性的增强类,保证了Map对象在多线程环境下的读写的线程安全性。在使用方法上和HashMap保持一致,都是Map接口的实现类。 类结构 核心数据结构 核心数据结构和HashMap相同,都 ...
分类:
其他好文 时间:
2020-06-18 19:44:46
阅读次数:
64