日志样本： 囧，日志格式是我随便定得（莫喷，在明珠时有专门的数据组统计日志，日志都非常规范，在这完全乱套了），为了方便统计支付成功的总金额旁边都空了个空格，这样的话方便使用awk取出金额！ [INFO] 2014-...
分类：
其他好文 时间：
2014-11-05 23:21:40
阅读次数：
494
这几天在搭建flume服务并在其框架下开发，反复调试输入命令让人不厌其烦，因此在这里记录一下自己找到的一些小技巧：
首先，把自己的应用程序做成一个service是一个很好的选择，一个service就需要支持start 和 stop，start能启动程序，stop能找到start所启动的程序的进程并且关掉它。
可以直接根据/etc/init.d/下的服务脚本来改，但我遇到了问题：因为那些系统服务...
分类：
Web程序 时间：
2014-11-05 19:49:02
阅读次数：
320
最近为了完成工作，需要将两个文件A.old和A进行比较，然后将A中新增加的部分保存到A中，其他部分删除。经过查找相关资料，发现有两种比较好的方法。1. 使用diff命令diff old.file new.file | grep "^> " | sed 's/> //g' > temp.file #只...
分类：
系统相关 时间：
2014-11-05 18:56:51
阅读次数：
274
只想达到两个目的：1）熟悉awk。2）临近双十一值夜班打发时间。开始 从netstat命令中提取了如下信息作为用例[root@appstockworker tmp]# netstat >>netstat.txt[root@appstockworker tmp]# cat netstat.txt A....
分类：
其他好文 时间：
2014-11-05 07:00:47
阅读次数：
460
http://www.cnblogs.com/ggjucheng/archive/2013/01/13/2858470.html简介awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔...
分类：
系统相关 时间：
2014-11-05 00:14:10
阅读次数：
274
1、简单求和，文件如下：[linux@test /tmp]$ cat test123.52125.54126.36求和：[linux@test /tmp]$ awk '{sum += $1};END {print sum}' test375.422、过滤条件求和：[linux@test /tmp]$...
分类：
系统相关 时间：
2014-11-04 19:21:14
阅读次数：
334
awk命令胡使用awk是一款功能强大的文字处理软件，可以以列为单位，来处理并显示出我们需要的信息，其用法如下：1)awkoption‘parttern{cmd}......‘awk常用的选项是-F指定列的分隔符awk-F:‘partern{action}‘就是每行以：作为分隔符，第一列为$1,$2,.....其中$0代表整行。awk中有..
分类：
其他好文 时间：
2014-11-04 07:03:46
阅读次数：
150
浮现在脑海的很多Linux命令，其中一些不为人知，另一些则很常见，如下：xargs or parallel: 并行运行一些程序，命令有很多的选项sed and awk: 广为人知并且非常有用的处理文本文件的命令，比Python和Ruby还快m4: 简单的宏处理命令screen: 功能强大的终端复用和...
分类：
其他好文 时间：
2014-11-03 10:08:16
阅读次数：
172
数据分析和建模方面的大量编程工作都是用在数据准备上的：载入、清理、转换以及重塑。有时候，存放在文件或数据库中的数据并不能满足你的数据处理应用的要求。很多人都选择使用通用编程语言（如Python、Perl、R或Java）或UNIX文本处理工具（如sed或awk）对数据格式进行专门处理。幸运的是，pan...
分类：
编程语言 时间：
2014-11-02 12:15:32
阅读次数：
271
sed -i 's/10.1.1.1/10.1.1.2/g' `grep -ir 10.1.1.1 * |grep -E '.xml:|.cfg:|.ini:|.wsdl:|.properties:' | awk -F: '{print $1}' | uniq `注：当中1为原IP，2为新IP ；要...
分类：
系统相关 时间：
2014-11-02 12:05:10
阅读次数：
154
