1，kafka包含3个组件：source、channel、sink source：1.7以上的版本提供了 TaildirSource，支持断点续传，1.6前的版本，需要自己开发程序，存储flume读取的文件位置，以便后续接着读取数据。 channel： FileChannel：数据存储在磁盘上，稳定 ...
分类：
Web程序 时间：
2020-06-17 11:20:34
阅读次数：
72
创建RAID（以RAID5为例）1、首先，我们要先创建新磁盘分区#fdisk /dev/hda创建3个500MB的分区（hda7，hda8，hda9），然后在fdisk命令下输入t，选择刚创建好的分区，输入fd，将刚创建好的3个分区转换为fd格式。输入w保存退出 2、激活刚创建好的分区#partpr ...
分类：
系统相关 时间：
2020-06-17 11:11:43
阅读次数：
86
一、自建yum仓库，分别为网络源和本地源。网络源：1、首先创建yum仓库：[centos@localhost~]$yuminstallcreaterepo2、将原来的yum网络源禁用。[root@localhostyum.repos.d]#mvCentOS-Base.repoCentOS-Base.repo.bak3、编辑CentOS-Base.repo[base]name=BaseRepoonm
分类：
其他好文 时间：
2020-06-17 10:54:51
阅读次数：
47
一、开关机 sync ：把内存中的数据写到磁盘中（关机、重启前都需先执行sync） shutdown -rnow或reboot ：立刻重启 shutdown -hnow ：立刻关机 shutdown -h 19:00 ：预定时间关闭系统（晚上7点关机，如果现在超过8点则第二天） shutdown - ...
分类：
系统相关 时间：
2020-06-17 10:53:35
阅读次数：
65
一、分区类型 主分区：最多4个 扩展分区： 最多1个 主分区+扩展分区最多4个 不能写数据，只能包含逻辑分区 逻辑分区：扩展分区下的分区 二、格式化 格式化最主要的目的是写入文件系统 写入文件系统主要是将磁盘：划分为等大的block，创建inode表，inode是一个结构体，包含了一个文件的权限，大 ...
分类：
系统相关 时间：
2020-06-16 23:43:03
阅读次数：
73
前言 本文是在讲述什么样的数据结构适合作为索引，以及其适合作为索引的原因。而阅读本文需要对B树和B+树结构有稍微的理解。以及需要对磁盘操作知识有稍微的了解。对于磁盘操作的相关知识，在文章尾部的链接文章中，有详细的介绍。 在MySQL中，主要有四种类型的索引，分别为：B-Tree索引，Hash索引，F ...
分类：
其他好文 时间：
2020-06-16 23:29:52
阅读次数：
79
#!/bin/bash echo "1. 对服务器硬件的监控" echo " 能够对服务器CPU进行监控，并输出CPU的信息" cpu=`cat /proc/cpuinfo |head -n 17` echo "CPU的信息为$cpu" echo " " echo " 2.能够对服务器内存进行监控， ...
分类：
系统相关 时间：
2020-06-16 21:54:51
阅读次数：
70
redis是一个内存数据库，数据保存在内存中，但是我们都知道内存的数据变化是很快的，也容易发生丢失。幸好Redis还为我们提供了持久化的机制，分别是RDB(Redis DataBase)和AOF(Append Only File)。 持久化流程： 既然redis的数据可以保存在磁盘上，那么这个流程是 ...
分类：
其他好文 时间：
2020-06-16 18:10:48
阅读次数：
72
InnoDB在什么情况下会触发检查点 checkpoint ？ 一、MySQL的checkpoint分类 1、sharp checkpoint（激烈检查点，要求尽快将所有脏页都刷到磁盘上，对I/O资源的占有优先级高） 2、fuzzy checkpoint（模糊检查点，会根据系统负载及脏页数量适当平衡 ...
分类：
数据库 时间：
2020-06-16 16:53:47
阅读次数：
82
hbase建表create高级属性 //hbase 表预分区也就是手动分区 这个很重要 下面几个shell 命令在后续的hbase 操作中可以起到很到的作用，且主要体现在建表的过程中，看下面几个create 属性1、BLOOMFILTER 默认是NONE 是否使用布隆过虑使用何种方式布隆过滤可以每列 ...
分类：
其他好文 时间：
2020-06-16 15:09:09
阅读次数：
150
