前言 有一段log日志,需从日志里面分析,统计IP访问次数排序前10名,查看是否有异常攻击。 日志提取 如下日志,这段日志包含的信息内容较多,我们希望提取ip,访问时间,请求方式,访问路径(不带参数),状态码 可以使用 awk 对日志内容格式化输出,根据空格格式化输入,第一列是ip,也就是 ,其它列 ...
分类:
编程语言 时间:
2020-05-20 18:37:41
阅读次数:
54
awk工作原理 第一步:执行BEGIN{action;...}语句块中的语句。 第二步:从文件或标准输入(stdin)读取一行,然后执行pattern{action;...}语句块,它逐行扫描文件,从第一行到最后一行重复这个过程,直到文件全部被读取完毕。 第三步:当读至输入流末尾时,执行END{ac ...
分类:
其他好文 时间:
2020-05-17 17:36:16
阅读次数:
70
JSON Lines文本文件格式的文档 本页描述JSON Lines文本格式,也称为换行符分隔的JSON。JSON Lines是一种方便的格式,用于存储可以一次处理一条记录的结构化数据。它与Unix样式的文本处理工具和Shell管道一起很好地工作。这是日志文件的绝佳格式。这也是在协作流程之间传递消息 ...
分类:
Web程序 时间:
2020-05-16 19:07:53
阅读次数:
87
很多人都会疑惑计算机行业学习什么技术好呢?很多人都会推荐Linux系统,一个对于很多人都非常陌生的名字,但是它可以做很多的事情,也是非常著名的操作系统,可以从事岗位众多,那么到底什么是Linux呢?Linux需要学习什么语言?跟着来看看吧。
分类:
编程语言 时间:
2020-05-14 01:25:07
阅读次数:
59
新建一台服务器 192.168.88.40 yum -y install mysql mysql-server 编辑etc下的配置文件 vim /etc/my.cnf 输入 bin-log=mysql-bin server-id=40binlog-ignore-db=mysql 主服务器赋予权限 g ...
分类:
数据库 时间:
2020-05-12 11:22:50
阅读次数:
82
AWK是一门程序设计语言,在linux领域,它是一个功能非常强大的文本处理工具。 语法: awk [option] '/pattern/{action}' file... 参数option -F 指定分隔符(可以用正则设置多个分隔符,默认分隔符为任意个连续空格) 条件pattern、动作action ...
分类:
系统相关 时间:
2020-05-12 09:42:44
阅读次数:
71
字符串和文本处理库 Conversion库:对C++类型转换的增强,提供更强的类型安全转换、更高效的类型安全保护、进行范围检查的数值转换和词法转换。 Format库:实现类似printf的格式化对象,可以把参数格式化到一个字符串,而且是完全类型安全的。 IOStream库 :扩展C++标准库流处理, ...
分类:
其他好文 时间:
2020-05-12 09:39:27
阅读次数:
77
sed 功能强大的流式文本编辑器 补充说明 sed 是一种流编辑器,它是文本处理中非常重要的工具,能够完美的配合正则表达式使用,功能不同凡响。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏 ...
分类:
系统相关 时间:
2020-05-11 18:23:33
阅读次数:
69
作者:韦东山。(有删改) 韦东山:我是1999年上的大学,物理专业。在大一时,我们班里普遍弥漫着对未来的不安,不知道学习了物理后出去能做什么。你当下的经历、当下的学习,在未来的一天肯定会影响到你。毕业后我们也各自找到了自己的职业:出国深造转行做金融、留校任教做科研、设计芯片、写程序、创办公司等等,这 ...
分类:
系统相关 时间:
2020-05-09 18:57:27
阅读次数:
84