#通过管道传递 cat somefile.txt |python somescriot.py |sort import sys text = sys.stdin.read() #标准输入流 words = text.split() print words #用户互动 raw_input() x = ...
分类：
其他好文 时间：
2020-09-04 17:10:31
阅读次数：
52
大家好，我是良许。 在使用 Linux 时，你是否遇到过需要将一些命令串在一起，但是其中一个命令不接受管道输入的情况呢？在这种情况下，我们就可以使用 xargs 命令。xargs 可以将一个命令的输出作为参数发送给另一个命令。 在 Linux 中，所有标准的应用程序都有与之关联的三个数据流。分别是标 ...
分类：
系统相关 时间：
2020-08-28 15:02:52
阅读次数：
83
本篇文章主要是手把手教你搭建ELK实时日志分析平台，那么，ELK到底是什么呢？ELK是三个开源项目的首字母缩写，这三个项目分别是：Elasticsearch、Logstash和Kibana。Elasticsearch是一个搜索和分析引擎。Logstash是服务器端数据处理管道，能够同时从多个来源采集数据，转换数据，然后将数据发送到诸如Elasticsearch等存储库中。Kibana则可以让用户在
分类：
其他好文 时间：
2020-08-28 11:57:17
阅读次数：
289
Bash技巧：介绍“v=var echo $v”和“v=var; echo $v”这两种写法的区别 在 Linux bash shell 中，当在同一行里面提供不同的命令时，命令之间需要用控制操作符隔开。 常见的控制操作符有分号 ‘;’、管道操作符 ‘|’、与操作符 ‘&&’、或操作符 ‘||’ 等 ...
分类：
其他好文 时间：
2020-08-27 13:04:40
阅读次数：
57
1.引言在本教程中，我们将了解如何使用事件数据和ApacheDruid.我们将介绍事件数据和Druid体系结构的基础知识。作为其中的一部分，我们将创建一个简单的数据管道，利用Druid的各种特性，包括各种数据接收模式和查询准备好的数据的不同方法。2.基础概念在深入讨论ApacheDruid的操作细节之前，让我们先了解一些基本概念。最感兴趣的是大规模事件数据的实时分析。因此，我们必须理解事件数据的含
分类：
Web程序 时间：
2020-08-24 16:48:37
阅读次数：
55
变量常见的变量：PATH：决定shell在哪些目录下寻找命令和程序；HOME：家目录；PWD：当前目录；LOGNAME：当前用户名称；env命令：查看常见变量；HOSTNAME：表示主机的名称。SHELL：表示当前用户的shell类型。HISTSIZE：表示历史记录数。MAIL：表示当前用户的邮件存放目录。PATH：该变量决定了shell将到哪些目录中寻找命令或程序。PWD：表示当前目录。LANG
分类：
其他好文 时间：
2020-08-20 19:07:24
阅读次数：
65
一、filebeat学习 1.简介 Filebeat附带预构建的模块，这些模块包含收集、解析、充实和可视化各种日志文件格式数据所需的配置，每个Filebeat模块由一个或多个文件集组成，这些文件集包含摄取节点管道、Elasticsearch模板、Filebeat勘探者配置和Kibana仪表盘。 Fi ...
分类：
其他好文 时间：
2020-08-19 20:11:48
阅读次数：
115
抓包工具有wireshark， tcpdump， 还有就是Charles。 今天分享的是最后一个Charles。抓包分2个， 一个是移动端的，一个是macOS自带的应用。 安装Charles https://www.charlesproxy.com/latest-release/download.d ...
分类：
系统相关 时间：
2020-08-18 14:07:44
阅读次数：
90
Linux系统中，有4个特殊符号 < > | - 在我们处理输入和输出时存在重要但具有迷惑性的作用 > 表示重定向 ， >filename就是把标准输出村存储到文件filename里面，标准错误错误还是会显示在屏幕上。 2 >&1 表示把标准错误重定向到标准输出。Linux终端用2表示标准错误，1表 ...
分类：
系统相关 时间：
2020-08-17 16:36:36
阅读次数：
78
ImagesPipeline ImagesPipeline：专门用作于二进制数据下载和持久化存储的管道类。建议在爬虫文件中进行数据解析，不建议在爬虫文件中直接进行数据存储。 图片懒加载：应用到标签的伪属性，数据捕获的时候一定是基于伪属性进行。 # -*- coding: utf-8 -*-impor ...
分类：
其他好文 时间：
2020-08-15 23:57:48
阅读次数：
109
