[TOC] 1. 内核、内核态和用户态 ? 内核是指管理和分配计算机资源的核心层软件。其中计算机资源包括CPU、RAM(随机存取存储器)和设备。内核有以下职责: ? 由于需要限制不同的程序之间的访问能力, 防止他们获取别的程序的内存数据, 或者获取外围设备的数据,并发送到网络, CPU划分出两个权限 ...
分类:
系统相关 时间:
2019-06-13 23:29:15
阅读次数:
178
源代码 运行结果 首先用数组形式申请了一块0x40大小的内存 修改成如下 在0x00到0x40遍伪造成了一个0x30+0x10大小的堆 之后又伪造了一个堆头部,size为0x1234 符合(>16b && <128kb)绕过检测 之后释放伪造的堆,即会进入0x40的fastbin 之后再申请0x30 ...
分类:
其他好文 时间:
2019-06-08 20:28:55
阅读次数:
129
hadoopMapReduce 1. MapReduce流程 2. Shuffle流程 1. MapReduce流程 MapReduce流程 切片: 对数据进行逻辑划分,默认大小是一个block块大小. 以文件为单位,所以注意小文件问题 计算规则:Math.max(minSize, Math.min ...
分类:
其他好文 时间:
2019-06-08 00:44:28
阅读次数:
92
目的 批量下载网页图片 导入库 urllib中的request中的urlretrieve方法,可以下载图片 lxml用于解析网页 requests用于获取网站信息 定义回调函数 回调函数中,count表示已下载的数据块,size数据块大小,total表示总大小。 在使用urllib中的request ...
分类:
编程语言 时间:
2019-06-07 22:55:24
阅读次数:
122
序列长$n$,询问$Q$。 离线 莫队呀,由于众数不好删除,直接回滚莫队即可,时间复杂度$o(n \sqrt n)$,空间$o(n) $。 在线 分块啊。 设块大小为T。 first 其实可以沿用回滚莫队思想,记录$[l,r]$块里的数的$cnt$,时间复杂度$\displaystyle o({n^ ...
分类:
其他好文 时间:
2019-05-13 14:42:34
阅读次数:
255
Hive的后端存储是HDFS,它对大文件的处理是非常高效的,如果合理配置文件系统的块大小,NameNode可以支持很大的数据量。但是在数据仓库中,越是上层的表其汇总程度就越高,数据量也就越小。而且这些表通常会按日期进行分区,随着时间的推移,HDFS的文件数目就会逐渐增加。 小文件带来的问题 关于这个 ...
分类:
其他好文 时间:
2019-04-21 20:02:52
阅读次数:
280
1.控件 一个UserControl作为ScrollBg,一个panel作为ScrollBar 2.关键数据 滑块大小: BoxPanelHeight/ContentPanelHeight*ScrollBgHeight ContenPanel纵坐标: -ScrollBar.Top /( Scroll ...
第1章 HDFS概述 1.1 HDFS产出背景及定义 1.2 HDFS优缺点 1.3 HDFS组成架构 1.4 HDFS文件块大小(面试重点) 第2章 HDFS的Shell操作(开发重点) 1.基本语法 bin/hadoop fs 具体命令 OR bin/hdfs dfs 具体命令 dfs是fs的实... ...
分类:
其他好文 时间:
2019-04-02 09:20:50
阅读次数:
267
在实际应用中,hdfs block块的大小设置为多少合适呢?为什么有的是64M,有的是128M、256M、512呢? ...
分类:
其他好文 时间:
2019-03-30 01:27:43
阅读次数:
263
挂载USB介质查看USB设备是否识别lsusb被内核探测为SCSI设备/dev/sdaX/dev/sdbX或类似的设备文件在图形环境中自动挂载挂载在/run/media/<user>/<label>手动挂载mount/,,,,,,,,,sync强制将buffer里面的写进磁盘里面,重复瞧三次最好常用工具文件系统空间占用信息查看df-h人性化查看-i节点代替块号-T显示文件系
分类:
其他好文 时间:
2019-03-28 23:18:13
阅读次数:
199