实践环境准备服务器说明我这里使用的是五台CentOS-7.7的虚拟机,具体信息如下表:系统版本IP地址节点角色CPUMemoryHostnameCentOS-7.7192.168.243.143master>=2>=2Gm1CentOS-7.7192.168.243.144master>=2>=2Gm2CentOS-7.7192.168.243.145master>=2>=2Gm3CentOS-7
分类:
其他好文 时间:
2020-09-17 16:00:20
阅读次数:
61
当运行中出现Container is running beyond physical memory这个问题出现主要是因为物理内存不足导致的,在执行mapreduce的时候,每个map和reduce都有自己分配到内存的最大值,当map函数需要的内存大于这个值就会报这个错误,解决方法: 在mapredu ...
分类:
其他好文 时间:
2020-09-17 13:31:24
阅读次数:
39
CMS的问题 Memory Fragmentation(内存碎片过多,导致启动单线程serial垃圾回收器) -XX:+UseCMSCompactAtFullCollection -XX:CMSFullGCsBeforeCompaction 默认为0 指的是经过多少次FGC才进行压缩 Floatin ...
分类:
其他好文 时间:
2020-09-15 21:02:24
阅读次数:
54
Pandas数据处理——盘点那些常用的函数(上)点击上方“Python读数”,选择“星标”公众号重磅干货,第一时间送达在之前的文章中,以图文的方式详细讲解了Pandas中groupby,merge以及map、apply、applymap的原理,掌握好这些原理,再在这个基础上进行一些拓展,基本就可以解决绝大部分比较复杂的数据处理操作了。几篇文章如下,想回看的小伙伴可以再重温一下:Pandas数据处理
分类:
其他好文 时间:
2020-09-11 15:52:05
阅读次数:
52
问题情形 当应用在Azure 应用服务App Service中运行时,有时候出现CPU,Memory很高,但是没有明显的5XX错误和异常日志,有时就是有异常但是也不能明确的指出具体的代码错误。当面临这样的情形是,有效的排查办法就是在问题重现的时候抓取DUMP文件,可以通过DUMP文件分析出是否有线程 ...
分类:
移动开发 时间:
2020-09-09 18:41:23
阅读次数:
58
一,druid的安全保障有哪些环节要注意? 1,druid ui的访问要有ip地址限制 2,用户必须要有相应的权限才能访问druid 3,关闭重置功能 说明:stat-view-servlet.url-pattern的配置应用时会报错, 如果bug修改了,使用这个功能会更安全 说明:刘宏缔的架构森林 ...
分类:
编程语言 时间:
2020-08-29 15:23:47
阅读次数:
61
本文整理自 2020 年云原生微服务大会主论坛白海石的分享《Capability Oriented Architecture for cloud and edge》,主要介绍了一种新的体系结构范式——面向能力的体系结构(COA),旨在为跨云和边缘的分布式、自适应和健壮的应用程序提供一个设计框架。
分类:
其他好文 时间:
2020-08-28 14:58:55
阅读次数:
58
一、进程结构 1、postgres server process是所有PostgreSQL数据库管理的父进程,在早期的版本种称为postmaster。 (1)随着pg_ctl start,postgres server process也随之启动。 (2)分配shared memory (3)启动一系 ...
分类:
数据库 时间:
2020-08-28 14:43:22
阅读次数:
82
循环神经网络往往应用于具有前后文关系的任务,比如语音识别,机器翻译,文本填空,股票预测,图像理解等等 RNN引入了时序的概念,有些类似于时序数字电路,由此具有记忆的能力 RNN的基本结构为 可以看到,最大的不同就是添加了记忆单元 整体结构为 不断地对 \(h_t\) 进行更新,使其具有记忆功能,其中 ...
分类:
其他好文 时间:
2020-08-27 13:04:16
阅读次数:
57
并发同步概述 本文将解释什么是并发同步,并列出Go支持的几种并发同步技术。 什么是并发同步? 并发同步是指如何控制若干并发计算(在Go中,即协程),从而 避免在它们之间产生数据竞争的现象; 避免在它们无所事事的时候消耗CPU资源。 并发同步有时候也称为数据同步。 Go支持哪些并发同步技术? 通道一文 ...
分类:
其他好文 时间:
2020-08-26 18:56:39
阅读次数:
51