一.Flume定义 ? Flume是Cloudera公司提供的一个高可用、高可靠、分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。 ? Flume最主要的作用就是,实时读取服务器的本地磁盘的数据,将数据写入到HDFS。 二.Flume基础架构 ? Flume基本组成架构如下 ...
分类:
Web程序 时间:
2020-07-03 23:51:14
阅读次数:
112
https://jingyan.baidu.com/article/75ab0bcb8736fcd6864db209.html 1.磁盘阵列是现今非常流行的一种磁盘管理技术,通常称为独立磁盘冗余阵列,也简称为磁盘阵列。按现在流行的等级可分为raid0 raid1 raid2 raid3 raid4 ...
分类:
其他好文 时间:
2020-07-03 15:39:40
阅读次数:
57
inotify-tools3.14版本永久链接 链接: inotify-tools-3.14提取码:15t5 概要:为什么需要监控系统文件? 跟踪某些关键的系统文件的变化 通知配置文件的改变 监控某个分区磁盘的整体情况 Inotify到底是做什么的? Inotify是一种文件变化通知机制,linux ...
分类:
系统相关 时间:
2020-07-03 15:18:14
阅读次数:
76
设备文件 一切皆文件:open(), read(), write(), close()设备文件:关联至一个设备驱动程序,进而能够跟与之对应硬件设备进行通信设备号码: 主设备号:major number, 标识设备类型 次设备号:minor number, 标识同一类型下的不同设备设备类型: 块设备: ...
分类:
其他好文 时间:
2020-07-03 12:55:49
阅读次数:
69
1. 什么是loop设备? loop设备是一种伪设备,是使用文件来模拟块设备的一种技术,文件模拟成块设备后, 就像一个磁盘或光盘一样使用。在使用之前,一个 loop 设备必须要和一个文件进行连接。这种结合方式给用户提供了一个替代块特殊文件的接口。因此,如果这个文件包含有一个完整的文件系统,那么这个文 ...
分类:
其他好文 时间:
2020-07-03 10:36:28
阅读次数:
49
第2章中,我们学习了IPython shell和Jupyter notebook的基础。本章中,我们会探索IPython更深层次的功能,可以从控制台或在jupyter使用。B.1 使用命令历史Ipython维护了一个位于磁盘的小型数据库,用于保存执行的每条指令。它的用途有:只用最少的输入,就能搜索、... ...
分类:
编程语言 时间:
2020-07-03 00:48:54
阅读次数:
72
一、 df 查看磁盘空间使用情况 df: disk free 空余硬盘 1.基本语法 df 选项 (功能描述:列出文件系统的整体磁盘使用量,检查文件系统的磁盘空间占用情况) 2.选项说明 -h 以人们较易阅读的 GBytes, MBytes, KBytes 等格式自行显示; 3.案例实操 查看磁盘使 ...
分类:
系统相关 时间:
2020-07-02 22:11:06
阅读次数:
109
课程学习总结报告 Linux之进程 概述:进程是Linux进行资源分配和调度的基本单位,进程也被看做是程序的一次执行过程,当持久化在磁盘上的二进制代码被载入内存时,Linux操作系统为其分配了用户栈和内核栈,同时使用task_struct这种数据结构对进程进行描述,task_struct是Linux ...
分类:
其他好文 时间:
2020-07-02 18:09:32
阅读次数:
66
集群搭建好之后网络,raid卡策略,磁盘都会影响集群的性能。为了避免因上述问题使得集群的性能受到影响,我们依次进行测试,最后得到基本的集群性能。 网络 首先是网络,ceph集群一大堆让人摸不着头脑的问题都出在网络上,所以我们在建立集群之前就可以测试网络,看其是否有问题,可以通过ping命令来测试网络 ...
分类:
其他好文 时间:
2020-07-02 13:43:09
阅读次数:
85
导航 (返回顶部) 1. 清理文件系统工具 1.1 Disk usage display 1.2 Disk cleaning 2. 软件包清理 2.1 Package cache 包缓存 2.2 Unused packages (orphans) 孤儿包 2.3 Pacman包管理器的使用参考 3. ...
分类:
系统相关 时间:
2020-07-02 09:28:01
阅读次数:
71