概述 缓存、Cache、Flyweight 属于结构型模式 不在每个对象中保存所有数据,而是共享多个对象所共有的相同状态,实现在有限的内存中载入更多的对象 在软件系统采用纯粹对象方案的问题在于大量细粒度的对象会很快充斥在系统中,从而带来很高的运行(内存)代价 如何在避免大量细粒度对象问题的同时,让外 ...
分类:
其他好文 时间:
2020-06-08 00:20:33
阅读次数:
54
前言 本节内容计划是讲解TLB与高速缓存的关系,但是在涉及高速缓的前提是我们必须要了解操作系统缓存原理,所以提前先详细了解下缓存原理,我们依然是采取循序渐进的方式来解答缓存原理,若有叙述不当之处,还请批评指正。 缓存原理 高速缓存被划分为多个块,其大小可能不同,缓存中的块数通常为2的幂。如下为一个具 ...
分类:
系统相关 时间:
2020-06-07 21:20:25
阅读次数:
93
1. 下列是有关程序、指令和数据关系的叙述,其中错误的是( ) A. 一个程序由若干条指令和所处理的数据组成 B. 指令和数据形式上没有差别,都是一串0/1序列 C. 指令和数据不能放在同一个存储中,必须分别存放在指令存储器和数据存储器中 D. 启动程序前指令和数据都存放在外存中,启动后才被装入内存 ...
分类:
其他好文 时间:
2020-06-06 10:40:08
阅读次数:
314
优化,更多是对针对数据结构在读或写上进行优化;常见的框架优化更多的是计算和存储上的优化 一、软优化: 1. 代码层面的优化,例如: 1)python中访问列表时,set比list快,尤其是数据量比较大时,in的访问,set效率更高 2)内存访问比磁盘访问更快,即适当添加os cache(内存缓存)和 ...
分类:
其他好文 时间:
2020-06-05 23:13:29
阅读次数:
71
在一日一技:实现函数调用结果的 LRU 缓存一文中,我们提到Python自带的LRU缓存lru_cache。通过这个装饰器可以非常轻松地实现缓存。 现在我们考虑下面这个应用场景:MongoDB中有100对id-用户名的对应关系,我从Redis中持续不断读取id,如果id能在MongoDB中找到对应关 ...
分类:
其他好文 时间:
2020-06-05 01:04:48
阅读次数:
93
CDH6.3.2启用Kerberos集成使用phoenix标签(空格分隔):大数据平台构建一、下载并安装Phoenixparcel二、安装CSD文件三、在ClouderaManager中添加Phoenix服务(前提是已经安装了HBase服务)四、配置HBase以用于Phoenix五、验证Phoenix安装与冒烟测试六、导入数据验证测试七、七:关于phoinex的schema与hbase的names
分类:
其他好文 时间:
2020-06-05 00:31:53
阅读次数:
121
引入场景:select下拉框每次都要向后台发送请求,性能方面你们都懂,如何优化? 在数据库设计一个字典表,用于存放常用的下拉框选项内容,项目启动时查询字典表,并把查询结果存入内存,然后下拉框会到内存中找选项内容。 数据不同步问题:可以设置定时任务,刷新缓存即可。 一,要实现的效果描述 在html页面 ...
分类:
系统相关 时间:
2020-06-04 20:05:58
阅读次数:
134
云的本地备份:就是将数据库的数据备份到云盘里。备份数据的异地同步复制,提高了企业信息安全等级,在本地数据被破坏,可快速从异地的备份存储中提取需要恢复的备份数据,快速进行数据恢复。[1]防止系统出现操作失误或系统故障导致文件丢失,而将全部或部分文件集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。在技术方面,远程磁盘镜像技术·同步数据库复制及NAS和SAN等技术使电子文件的异地备份保存轻而易举就
分类:
其他好文 时间:
2020-06-04 20:02:28
阅读次数:
91
大家可能都知道很熟悉Spark的两种常见的数据读取方式(存放到RDD中):(1)、调用parallelize函数直接从集合中获取数据,并存入RDD中;Java版本如下: JavaRDD<Integer> myRDD = sc.parallelize(Arrays.asList(1,2,3)); Sc ...
分类:
其他好文 时间:
2020-06-04 10:38:09
阅读次数:
76
这几天由于项目的需要,需要将Flume收集到的日志插入到Hbase中,有人说,这不很简单么?Flume里面自带了Hbase sink,可以直接调用啊,还用说么?是的,我在本博客的《Flume-1.4.0和Hbase-0.96.0整合》文章中就提到如何用Flume和Hbase整合,从文章中就看出整个过 ...
分类:
Web程序 时间:
2020-06-04 10:26:08
阅读次数:
83