使用shell处理oracle数据库alert日志

曾经终败给现在 2022-08-24 01:28 179阅读 0赞

本文给出使用shell实现对oracle数据库的alert日志进行处理的算法和实现过程，并给出一个样例，实例表明，脚本能快速有效的分析alert日志，满足需求，最后对处理过程进行展望。

**    1. 背景概述**

对于日常的一些重复性的操作，以及在用户现场进行问题处理的过程中，采用一些自动化的脚本，来完成一些工作，会使一些枯燥的工作变得简单、快速，同时也不容易出错。在为某些省份联通公司和财政厅实施服务的过程中，了解到用户有如下的需求：提供shell脚本，实现对oracle数据库的alert日志进行跟踪处理，比如根据时间（天为单位），来查看和处理alert日志。

在未编写脚本时，常用的处理方法是，[下载][Link 1]alert文件，使用文本编辑工具查找，统计，定位，过滤，[下载][Link 1]跟踪文件。一般比较费时，而且可能会有遗漏。

本文首先阐述算法，接着给出实现代码与样例，最后给出展望，脚本主要包括shell脚本以及sql脚本。

**2. 算法**

**![20081016150731126.jpg][]**

图1 流程图  
    确定需要分析多少天以来的日志情况对时间进行处理，根据时间戳格式（本文处理的alert文件的时间格式类似于：Fri Aug 1 13：22：37 2008），获取起始行号，分析从起始行号到结束的所有内容。

过滤所有的ORA-信息，并对他们进行统计显示。

对关键的错误信息（ORA-00600，ORA-000060，ORA-1555，ORA-07445），进行单独处理。

查找并获取跟踪文件。生成ftp的格式，使用ftp命令[下载][Link 1]跟踪文件。

使用操作系统命令，获取错误对应的含义。

3. **Shell代码**

处理alert文件的调用脚本check\_alert.sh

\#! / bin / sh  
\#设置alert日志文件的环境变量  
ORIGINAL\_ALERT = " / arraybill / home / oracle / app / oracle / admin / hnbill / bdump / alert\_hnbill. log "  
\#判断输入的参数：天  
 if  \[  $\# -ne 1  \]   
 then   
echo "参数不对，用法: sh check\_alert.sh  **3** "  
 exit  **1**   
fi  
 if  \[  $1 -lt 0  \]   
 then   
echo "对不起,请输入一个非负整数"  
 exit  **1**   
fi  
  
\#查询参数对应时间以前的系统时间  
sh dated\_alert.sh $ **1**  >/ dev / null   
\#分解时间格式，注意，其中天可能是一位，也可能是两位，月份是3位，月份与天组成的字符串长度固定  
str\_day = $(sed 1d tmp\_date. log | awk  ' \{if(substr($1,1,1) == 0) print substr($1,2,1);else print substr($1,1,2) \} ' )  
str\_length = $(echo $str\_day | awk  ' \{print length($1)\} ' )  
\#将三个字母表示的月份分解成首字母大写，其他小写  
str\_month = $(sed 1d tmp\_date. log | awk  ' \{print substr($1,4,3)\} ' | sed  ' 1,$y/\[JFMASODN\]ABCDEFGHIJKLMNOPQRSTUVWXYZ/\[JFMASODN\]abcdefghijklmnopqrstuvwxyz/ ' )  
  
 if  \[  $str\_length -eq 1  \]   
 then   
echo "awk  ' /""$str\_month $str\_day""/\{print NR\} '  "$ORIGINAL\_ALERT""  > tmp.sh  
\#echo "$str\_month $str\_day"  
  
fi  
 if  \[  $str\_length -eq 2  \]   
 then   
echo "awk  ' /""$str\_month $str\_day""/\{print NR\} '  "$ORIGINAL\_ALERT""  > tmp.sh  
\#echo "$str\_month $str\_day"  
  
fi  
  
chmod  **777**  tmp.sh  
chmod  **777**  tmp.sh  
sh tmp.sh  | awk  ' NR==1\{print $1\} '  > rownum.lst  
  
\#获取要处理的alert日志的开始行号和结束行号  
alert\_row\_begin = $(cat rownum.lst  | awk  ' \{print $1\} ' )  
alert\_row\_end = $(wc  \- l $ORIGINAL\_ALERT | awk  ' \{print $1\} ' )  
echo "awk  ' NR==$alert\_row\_begin,NR==$alert\_row\_end\{print /$0\} '  "$ORIGINAL\_ALERT""  > tmp.sh  
  
\#根据行号范围，截取alert日志内容，并保存到临时文件tmp\_alert.tmp中  
  
sh tmp.sh  > tmp\_alert.tmp  
  
echo  
echo " \-- \---------------------------------------------"   
 echo "错误汇总 开始时间：$begin\_date\_time"  
echo " \-- \---------------------------------------------"   
 echo  
  
echo "数量 错误号"  
echo " \-- \-- -------------------"   
 grep ORA \-  tmp\_alert.tmp  | awk  ' \{print substr($0,0,9)\} ' | sort  \- nr |  uniq  \- c | sort  \- nr  
  
\#如果有600错误，调用600错误的处理脚本  
 if  \[  $(awk '/ORA-00600/\{print NR\}' tmp\_alert.tmp|wc -l|awk '\{print $1\}') -gt 0  \]   
 then   
sh check\_00600.sh  
fi  
\#如果有07445错误，调用07445错误的处理脚本  
 if  \[  $(awk '/ORA-07445/\{print NR\}' tmp\_alert.tmp|wc -l|awk '\{print $1\}') -gt 0  \]   
 then   
sh check\_07445.sh  
fi  
  
\#如果有  **000060**  错误，调用000060错误的处理脚本  
 if  \[  $(awk '/ORA-000060/\{print NR\}' tmp\_alert.tmp|wc -l|awk '\{print $1\}') -gt 0  \]   
 then   
sh check\_000060.sh  
fi  
  
\#如果有  **01555**  错误，调用01555错误的处理脚本  
 if  \[  $(awk '/ORA-01555/\{print NR\}' tmp\_alert.tmp|wc -l|awk '\{print $1\}') -gt 0  \]   
 then   
sh check\_01555.sh  
fi  
  
echo  
\#删除调用过程中产生的临时文件  
rm  \- f tmp\_3\_line.sh  
rm  \- f tmp\_date. log   
rm  \- f tmp.sh  
rm  \- f ora01555\_trc. log   
rm  \- f ora006000\_trc. log   
rm  \- f ora07445\_trc. log   
rm  \- f ora000060\_trc. log   
rm  \- f trc\_tmp  
rm  \- f tmp\_alert.tmp  
rm  \- f ora006000\_rownum. log   
rm  \- f rownum.lst

产生格式化日期的脚本dated\_alert.sh

echo " set  heading  off "  > get\_date.sql  
echo " set  feedback  off "  >> get\_date.sql  
echo " set  term  off "  >> get\_date.sql  
echo "spool tmp\_date. log "  >> get\_date.sql  
echo " select  sysdate \- "$ **1** "  from  dual;"  >> get\_date.sql  
  
echo "spool  off "  >> get\_date.sql  
echo " exit "  >> get\_date.sql  
  
export NLS\_LANG = american  
  
sqlplus " / as  sysdba"  @get\_date .sql  << EOF  
EOF  
  
rm  \- f get\_date.sql

处理ORA-00600错误的脚本check\_00600.sh  
       本只给出ORA-00600错误的处理脚本，其他错误类似，限于篇幅，其他错误的处理脚本在此处省略。

echo  
echo " \-- \--------------------"   
 echo "ORA \- 00600错误跟踪信息"  
echo " \-- \--------------------"   
   
awk  ' /ORA-00600/\{print NR\} '  tmp\_alert.tmp | awk  ' \{print "awk "" ' / '' ""NR == "$ **1** \- **1** " \{  print  ""/"mget /"""substr($ **4** , **1** ,length($ **4** ) \- **1** )\}"" ' / '' "" tmp\_alert.tmp"\} '  > tmp1.sh  
chmod  **777**  tmp1.sh  
chmod  **777**  tmp1.sh  
echo  
echo  
sh tmp1.sh  | sort  \- r |  uniq  > ora006000\_trc. log   
  
\#对所有的ORA \- 00600跟踪文件进行处理，去掉重复的文件，判断文件是否存在，并生成ftp可用的格式  
echo ""  > trc\_tmp  
 for  trc\_file  in  $(cat ora006000\_trc. log | awk  ' \{print $2\} ' )  
do  
 if  \[  \-f $trc\_file  \]   
 then   
echo "mget $trc\_file"  >> trc\_tmp  
 else   
echo "找不到跟踪文件: $trc\_file"  >> trc\_tmp  
fi  
done  
cat trc\_tmp | sort  \- r  
echo  
echo  
  
echo  > tmp\_3\_line.sh  
chmod  **777**  tmp\_3\_line.sh  
chmod  **777**  tmp\_3\_line.sh  
  
\#对于每个ORA \- **00600** ，打印时间戳、跟踪文件和具体报错信息  
 for  tmp\_row\_num  in  $(awk  ' /ORA-00600/\{print NR\} '  tmp\_alert.tmp)  
do  
let tmp\_time = $tmp\_row\_num \- **2**   
let tmp\_trc = $tmp\_row\_num \- **1**   
echo "awk  ' NR=="$tmp\_time"\{print /$0\} '  tmp\_alert.tmp"  >> tmp\_3\_line.sh  
echo "awk  ' NR=="$tmp\_trc"\{print /$0\} '  tmp\_alert.tmp"  >> tmp\_3\_line.sh  
echo "awk  ' NR=="$tmp\_row\_num"\{print /$0\} '  tmp\_alert.tmp"  >> tmp\_3\_line.sh  
echo "echo"  >> tmp\_3\_line.sh  
done  
  
sh tmp\_3\_line.sh  
  
echo  
echo  
  
\#错误信息提示  
echo " \-- \-------------"   
 echo "关于ORA \- **00600** "  
echo " \-- \-------------"   
 oerr ora  **00600**   
echo

输出样例

$ sh check\_alert.sh  **2**   
 \-- \--------------------------------------------   
 错误汇总 开始时间：Wed Sep  **10**  **00** : **11** : **39**  **2008**   
 \-- \---------------------------------------------   
   
数量 错误号  
 \-- \-- -------------------   
 **3**  ORA \- **00600**   
 **1**  ORA \- **01555**   
  
  
 \-- \--------------------   
 ORA \- **00600**  错误跟踪信息  
 \-- \--------------------   
   
  
mget  / arraybill / home / oracle / app / oracle / admin / hnbill / udump / hnbill\_ora\_5984.trc  
找不到跟踪文件:  / arraybill / home / oracle / app / oracle / admin / hnbill / udump / hnbill\_ora\_10650.trc  
  
  
  
Fri Sep  **10**  **11** : **55** : **42**  **2008**   
Errors  in  file  / arraybill / home / oracle / app / oracle / admin / hnbill / udump / hnbill\_ora\_15196.trc:  
ORA \- **00600** : internal error code, arguments:  \[ qerrmObnd1 \] ,  \[ 932 \] ,  \[ ORA-00932: inconsistent datatypes: expected got  
  
Fri Sep 10 11:56:16 2008  
Errors in file /arraybill/home/oracle/app/oracle/admin/hnbill/udump/hnbill\_ora\_15196.trc:  
ORA-00600: internal error code, arguments: \[qerrmObnd1 \] ,  \[ 932 \] ,  \[ ORA-00932: inconsistent datatypes: expected got  
  
Tue Sep 10 19:48:49 2008  
Errors in file /arraybill/home/oracle/app/oracle/admin/hnbill/udump/hnbill\_ora\_5984.trc:  
ORA-00600: internal error code, arguments: \[729 \] ,  \[ 1200 \] ,  \[ space leak \] ,  \[\] ,  \[\] ,  \[\] ,  \[\] ,  \[\]   
  
  
 \-- \-------------   
 关于ORA \- **00600**   
 \-- \-------------   
 **00600** ,  **00000** , "internal error code, arguments:  \[ %s \] ,  \[ %s \] ,  \[ %s \] ,  \[ %s \] ,  \[ %s \] ,  \[ %s \] ,  \[ %s \] ,  \[ %s \] "  
 //  \* Cause: This  is  the generic internal error  number  for [Oracle][] program  
 //  exceptions. This indicates that a process has encountered an  
 //  exceptional condition.  
 //  \* Action: Report  as  a bug  \-  the first argument  is  the internal error  number   
  
  
  
 \-- \-----------------------   
 ORA \- **01555**  错误跟踪信息  
 \-- \-----------------------   
 Thu Sep  **11**  **04** : **38** : **18**  **2008**   
ORA \- **01555**  caused  by  SQL statement below (Query Duration = **12429**  sec, SCN:  **0x0240** .ba061afa):  
Thu Sep  **11**  **04** : **38** : **18**  **2008**   
 SELECT  \*  FROM  BB\_SERVICE\_RELATION\_T  WHERE  CITY\_CODE  =  :B4  AND  SERVICE\_KIND  =  :B3  AND  IF\_VALID  =  **1**  AND  SERVING\_STATUS  <>  **10**  AND  SERVING\_STATUS  <>  **20**  AND  (PRESERVE02  <>  **1**  OR  PRESERVE02  IS  NULL )  AND  MOD( USER\_ID ,:B2 )  =  :B1  \-  **1**   
  
  
 \-- \-------------   
 关于ORA \- **01555**   
 \-- \-------------   
 **01555** ,  **00000** , "snapshot too old:  rollback  segment  number  % s  with  name /" % s/" too small"  
 //  \* Cause:  rollback  records needed  by  a reader  for  consistent  read  are  
 //  overwritten  by  other writers  
 //  \* Action:  If  in  Automatic Undo Management mode, increase undo\_retention  
 //  setting. Otherwise,  use  larger  rollback  segments

4**. 后处理与展望**

本文只是对符合时间格式的alert文档进行处理，脚本还需要进一步完善，以提高其可扩展性，即能定义一个错误列表，相当于一个配置表，只需要修改错误列表，就能决定哪些错误是需要重点关注的。此外，还需要添加一个模块，如果在alert文件对应的时间戳上没有找到记录，需要进行一个异常处理。  
  
      对查找到的错误，要及时进行后处理，这些处理包括：对错误进行分析，查找文档，需要优化的语句进行优化，需要打补丁的bug，视情况下载并打补丁。

[Link 1]: http://download.chinaitlab.com/
[20081016150731126.jpg]: http://oracle.chinaitlab.com/UploadFiles_7269/200810/20081016150731126.jpg
[Oracle]: http://oracle.chinaitlab.com/