https://blog.csdn.net/qq_28900249/article/details/90346599 1、为什么要使用 kafka，为什么要使用消息队列 缓冲和削峰 解耦和扩展性 冗余 健壮性 异步通信 2、kafka的分区与消费者关系 分区（partition）kafka中的top ...
分类：
其他好文 时间：
2020-03-30 09:54:44
阅读次数：
91
整体架构优化点: 根据不同业务需求进行日期分区, 并执行类型动态分区。 hive.exec.dynamic.partition=true 为了减少磁盘存储空间以及I/O次数, 对数据进行压缩(Gzip) mapreduce.output.fileoutputformat.compress=true ...
分类：
其他好文 时间：
2020-03-29 19:55:40
阅读次数：
105
吐槽 最近被deepin搞得烦躁，本来就想装着玩玩，没想要折腾引导。废话不多，直接搞！ 软件准备： Deepin Linux 及 深度启动盘制作工具 DiskGeniusV5.XXX 硬盘分区工具 注意版本，低版本不支持ext4分区文件格式读取 easyBCD 启动项编辑工具 GRUB4DOS0.4 ...
resize缩放使用最邻近插值INTER_NEAREST产生新值的问题 假如一张图片中，一部分区域值直接是0，也就是空的。 在缩放的时候，我们自然不希望在0值与有效值之间产生插值。 为了使用方便，我刚开始想当然用了OpenCV的库函数： 但是不幸的事情发生了，总会在边缘产生插值。我的例子是深度图： ...
分类：
其他好文 时间：
2020-03-29 19:41:18
阅读次数：
262
问题 1) 容量不够，redis如何进行扩容？ 2) 并发写操作， redis如何分摊？ 什么是集群 1) Redis 集群实现了对Redis的水平扩容，即启动N个redis节点，将整个数据库分布存储在这N个节点中，每个节点存储总数据的1/N。 2) Redis 集群通过分区（partition）来 ...
分类：
其他好文 时间：
2020-03-29 17:56:07
阅读次数：
91
1.drbd简介 drbd是通过网络(tcp连接)在不同服务器之间实现基于block级别进行数据实时同步的软件。类似于inotify+rsync，只不过inotify+rsync是按文件级别来同步的，而drbd是工作在文件系统下层的，实现的是block同步和拷贝，效率相对较高。且inotify+rs ...
分类：
其他好文 时间：
2020-03-29 17:50:43
阅读次数：
69
1./mnt目录存放手动挂载的硬件； 2. /media目录存放自动挂载的硬件（载点都是由系统自动建立和删除的） 3. /dev不是存放设备的驱动程序，而是作为访问外部设备文件的接口。比如，我们的U盘，插入linux系统后，用fdisk -l查看分区，显示文件为/dev/sda1。则我们可以将u盘挂 ...
分类：
系统相关 时间：
2020-03-29 12:38:53
阅读次数：
98
文件管理 1.文件系统目录结构功能 /boot：引导文件存放目录，内核文件(vmlinuz)、引导加载器 (bootloader, grub)都存放于此目录 /bin：所有用户使用的基本命令；不能关联至独立分区，OS启动即会用到的程序 /sbin：管理类的基本命令；不能关联至独立分区，OS启动即会用 ...
分类：
其他好文 时间：
2020-03-28 23:36:15
阅读次数：
106
将/etc/fstab 文件中包含swap的行注释掉 单用户可以打开的最大文件数量，可以设置为官方推荐的65536或更大些 单用户线程数调大 单进程可以使用的最大map内存区域数量 参数修改立即生效 ...
分类：
系统相关 时间：
2020-03-28 13:33:58
阅读次数：
268
当表中的数据量不断增大,超过1G时,你们怎么办 1GB约等于多少数据量 约等于1000万 你们项目的体量是多大 小银行一般是GB级别,大的可能会1,2TB 建立分区表,建立索引,建立拉链表 表空间和临时表空间区别 Oracle临时表空间主要用来做查询和存放一些缓冲区数据。临时表空间，可自动释放； 而 ...
分类：
其他好文 时间：
2020-03-28 13:21:04
阅读次数：
98
