Java内存模型(JMM)与线程安全 1:JMM其实是java虚拟机栈的一部分 2:主内存和工作内存:都属于Java虚拟机内存 主内存:主要对应于JVM内存区域中的堆内存中的对象实例数据部分 工作内存:主要对应于JVM内存区域中的虚拟机栈中的部分区域 主内存与工作内存的数据交换操作的过程(通过总线b ...
分类:
编程语言 时间:
2020-03-21 16:35:32
阅读次数:
69
文件系统概述和EXT2文件系统 文件系统概述 常用的文件系统有windows98前的FAT、windows2000后的NTFS、linux的Ext2/3/4、SGI的XFS文件系统等 对于传统的文件系统而言,一个分区槽只能格式化为一个文件系统,但是目前由于LVM与软件磁盘阵列技术的出现,使一个分区可 ...
分类:
其他好文 时间:
2020-03-21 15:02:09
阅读次数:
86
分区、格式化与修复 磁盘分区命令 不同的文件系统要用不同的命令来分区,在执行分区前应该执行lsblk和parted命令来查看相关信息,然后再执行分区。执行磁盘分区时主要用gdisk和fdisk命令,这两个命令分别适用于MBR分区和GPT分区,不能搞混。 gdisk后加装置命令就可以进入分区命令模式, ...
分类:
其他好文 时间:
2020-03-21 14:46:35
阅读次数:
64
查询磁盘和监控系统资源 查询磁盘分区状态 lsblk(list block device)命令可以查看本系统下所有磁盘和磁盘内的分区信息: 可以看到当前系统有sr0、sda装置,sda下有三个分区分别是123,输出信息的含义是: NAME是装置的文件名,MAJ:MIN是主要和次要装置代码,RM代表是 ...
分类:
其他好文 时间:
2020-03-21 14:39:41
阅读次数:
63
文件系统特点与XFS文件系统 支持的文件系统与VFS 通过查看下列目录可以知道linux支持的文件系统: 查看系统目前已加载到内存中支持的文件系统: ,这个命令有时在分区结束后信息并不更新,此时应该重启或执行partprobe命令,它可以更新核心的分区表信息。 整个linux的系统都是通过一个名为V ...
分类:
其他好文 时间:
2020-03-21 14:34:14
阅读次数:
177
原文链接: https://www.toutiao.com/i6770870821809291788/ Hive和mapreduce相关的排序和运行的参数 1.设置每个reduce处理的数据量(单位是字节) 我们在hive中查看下 配置文件hive-site.xml.template 我们打开配置文 ...
分类:
编程语言 时间:
2020-03-21 00:06:17
阅读次数:
85
[toc] 涵盖知识点:思维、构造、马拉车。 比赛链接: "传送门" D题只有数据范围的区别,故只写D2。 好多题啊,随缘更新。(其实懒得写) "A Bad Ugly Numbers" 题意: 构造一个长度为$n$的数字使得其不能被其中的每一位数整除。 题解: 2333333(雾) Accept C ...
分类:
其他好文 时间:
2020-03-20 14:29:02
阅读次数:
84
kafka分区,excutor,task,RDD分区的关系: 数据的流:数据流向从kafka>sparkStreaming>RDD 1 kafka中的 topic 的 patition 分区的设置,kafka 的 partition 分区数 ,sparkStreaming 直连方式从kafka中拉数 ...
分类:
其他好文 时间:
2020-03-20 12:30:57
阅读次数:
108
kafka的基本概念 kafka是什么 ? ? kafka是一个多分区、多副本且基于zookeeper协调的分布式消息系统。也是一个分布式流式处理平台,它以高吞吐、可持久化、可水平扩展、支持流数据处理等多种特性而被广泛使用。 kafka扮演的三大角色 消息系统 :kafka具备系统解耦、冗余存储、流 ...
分类:
其他好文 时间:
2020-03-20 10:47:33
阅读次数:
76
1、消费者与消费者组 假设某 topic 有4个分区,消费者组中只有一个消费者,那么这个消费者将消费全部 partition 中的数据。 如果消费者组中有两个消费者,那么每个消费者消费两个 partition。 如果消费者组中有4个消费者,那么每个消费者消费一个partition。 如果消费者组中有 ...
分类:
其他好文 时间:
2020-03-19 21:29:18
阅读次数:
65