任何程序运行起来免不了产生很多日志,其中错误日志需要最为关心的。在某些时候会将错误日志和正常日志分开,但我们的系统却没有这么做。更麻烦的是,每个小时存储一个日志文件,所以每次为了查找当天是否有错误信息需要打开N个文件,而且不能用grep因为需要把整个堆栈抓取下来。
SHELL
本人对shell完全是初学,磕磕碰碰写了个脚本。主要逻辑是判断ERROR的日志级别的那一行开始记录,直到碰到下一个INFO或者DEBUG的日志级别行。
#!/bin/bash
isInErrorBlock=false
strArray=()
count=1
while read line
do
#echo "Line $count:"
arrayIdx=$count%10
strArray[$count]="$line"
idx=$(expr match "${strArray[$count]}" ".*ERROR")
if [ $idx -le 0 ];
then
idx=$(expr match "${strArray[$count]}" ".*Exception*")
fi
idx2=$(expr match "${strArray[$count]}" ".*DEBUG")
idx3=$(expr match "${strArray[$count]}" ".*INFO")
if [ $idx -gt 0 ] ;
then
if ! $isInErrorBlock;
then
echo 'print out previous lines'
isInErrorBlock=true
echo ${strArray[$count]}
fi
else
if [ $idx2 -gt 0 ] || [ $idx3 -gt 0 ] ;
then
isInErrorBlock=false
else
if $isInErrorBlock;
then
echo ${strArray[$count]}
fi
fi
fi
count=$[ $count+1 ]
done
#echo "finish\n"
exit 0
效果
基本达到了要求,对于每个目录 cat *log | sh find_error.sh 能够将整个堆栈单独输出到一个文件。但是效率很慢,不知道如何才能提高SHELL的运行效率。
相关阅读: