在linux下用awk分析日志文件

今儿刚坐下不久,领导就发话了,在这么个文件中找到开头为To: =?,包在尖括号中的数据存到数据库中。
 
文件如下:
<[email protected]>
To: =?UTF-8?B?5p2O5LqR5biG?= <[email protected]>
Message-ID: <[email protected]>
Subject: =?UTF-8?B?5p2O5LqR5biG77yM5oub5ZWG6K+B5Yi4IOmCgOivt+S9oA==?=
 =?UTF-8?B?5oqV6YCSMjAxNOagoeWbreaLm+iBmOiBjOS9jQ==?=
 
首先要想办法提取出数据到文件,然后循环读每一行,并插入到数据库。
 
本人没什么好办法,只好采用awk硬撸…
 
awk ‘/To: =\?/‘ filename | awk -F ‘<‘ ‘{print $2}‘ |awk -F ‘>‘ ‘{print $1}‘ >> lzq.result
 
方法虽笨,但也取着了……
 
循环读文件每一行有三种方法:本人采用的就是第二种
 
1) while read line
 
do
... $line
done > filename(要循环的文件名)
 
2) cat filename |while read line
do
  ...$line
done 
 
3) for line in ‘cat filename‘
do
...$line
done
总感觉这个$line很Nb……
 
接下来就要存进数据库了,采用如下命令:
 
mysql -u用户名 -p密码 -h主机名 -e 数据库语句
 
一定要注意单双引号……
 
最终脚本如下。
 
#!/bin/bash
awk ‘/To: =\?/‘ filename | awk -F ‘<‘ ‘{print $2}‘ |awk -F ‘>‘ ‘{print $1}‘ | while read line
do
mysql -uroot -proot -h 127.0.0.1 -e "insert into test.deny_mail(email) values(‘$line‘); "
done
 
成。

郑重声明:本站内容如果来自互联网及其他传播媒体,其版权均属原媒体及文章作者所有。转载目的在于传递更多信息及用于网络分享,并不代表本站赞同其观点和对其真实性负责,也不构成任何其他建议。