默认方式：先入先出，消息被追加写入每个分区的尾部 分区：可以在不同的服务器上，也就是说，一个主题可以横跨多个服务器 我们吧一个主题的数据看成一个流，不管分多少区，流就是一组从生产者移动到消费者 一个kafka服务器被称为broker，一个broker可以轻松处理数千个分区一级美妙百万级的消息量 保留 ...
分类：
其他好文 时间：
2020-06-15 10:14:47
阅读次数：
57
Linux分区和文件夹关联的 根必须有一个独立的分区和它关联，至少分配一个分区给根用 一个硬盘，默认叫 /dev/sda ，假设200G 分区/dev/sda1 mount到/boot目录，这个目录存放引导数据，不需要太多空间，不要存放其它无关数据，1G足够，事实上也就一两百兆空间数据，文件夹叫挂载 ...
分类：
系统相关 时间：
2020-06-14 23:39:07
阅读次数：
79
Ubuntu安装过程中，磁盘分区是我们头疼的环节，如果直接按照安装程序推荐总感觉分得不太对，磁盘用着用着就不够用了，特别是装双系统的情况下，本文介绍一下笔者的分区方案。 1. 确定要安装的磁盘 确定要安装的磁盘，并将多余无用的分区格式化，不过也要注意不要影响双系统原来的系统 2. 创建主分区 5G ...
分类：
系统相关 时间：
2020-06-14 20:58:53
阅读次数：
309
Hbase系统架构图 1、数据热点问题 产生数据热点问题的原因： （1）Hbase的数据是按照字典排序的，当大量连续的rowkey集中写到个别的region，各个region之间实际分布不均衡； （2）创建表时没有提前预分区，创建的表默认只有一个region，大量的数据写入当前region； （3） ...
分类：
其他好文 时间：
2020-06-14 18:51:08
阅读次数：
112
作者|MOHD SANAD ZAKI RIZVI 编译|VK 来源|Analytics Vidhya 概述 由AI生成的假新闻(神经假新闻)对于我们的社会可能是一个巨大的问题 本文讨论了不同的自然语言处理方法，以开发出对神经假新闻的强大防御，包括使用GPT-2检测器模型和Grover（AllenNL ...
分类：
其他好文 时间：
2020-06-14 12:58:59
阅读次数：
129
本篇文章主要阐述了VirtualBox的使用，Linux的分区，CentOS7操作系统的安装与IP配置，MobaXterm远程工具的使用 ...
分类：
系统相关 时间：
2020-06-13 17:31:14
阅读次数：
76
由于内部虚拟机采用pv,vg,lv模式，导致经常性的做lv扩容操作。于是编写以下脚本方便使用，仅供参考#!/bin/bash#v1.0#by-xgmin-20200507echo"pleaseinputyourlvname"readnamelvlv_name=df-Ph|grep"/$namelv"|awk‘{print$1}‘lv_type
分类：
其他好文 时间：
2020-06-13 00:13:57
阅读次数：
58
ArchLinux与Deepin桌面环境安装 一、ArchLinux安装 准备工作 ? 利用rufus和iso文件制作u盘启动盘，分区选择GPT，已DD模式写入（下载低版本的rufus）,iso可以从清华大学镜像站下载https://mirrors.tuna.tsinghua.edu.cn/arch ...
分类：
系统相关 时间：
2020-06-12 14:33:54
阅读次数：
83
以“CentOS 7.5 64bit”操作系统为例，数据盘“/dev/vdc”原有容量40GB，只有一个分 区“/dev/vdb1”。将系统盘容量扩大至50GB，本示例将新增的10GB划分至已有的MBR分区 内“/dev/vdc1”内。此过程必须保证原有数据不会损坏或丢失 1.执行以下命令，查看系统 ...
分类：
系统相关 时间：
2020-06-12 14:14:06
阅读次数：
297
高级算子 mapPartitionWithIndex：对RDD中每个分区（有下标）进行操作，通过自己定义的一个函数来处理 def mapPartitionsWithIndex[U](f: (Int, Iterator[T]) ? Iterator[U]) f 是函数参数，接收两个参数 Int：分区号 ...
分类：
数据库 时间：
2020-06-12 00:32:18
阅读次数：
96
