centos oracle故障排查流程

CentOS 上 Oracle 故障排查流程

一 快速定位与信息收集

• 明确现象与影响范围：记录故障的发生时间、持续时长、影响用户/业务，并观察CPU、内存、I/O、网络等系统指标与应用响应时间。
• 检查实例与监听：
  • 查看实例进程：ps -ef | grep pmon；登录 SQL*Plus：sqlplus / as sysdba；尝试 startup。
  • 查看监听：lsnrctl status，必要时 lsnrctl start。
• 收集日志：
  • Oracle 告警与跟踪：tail -n 200 $ORACLE_BASE/diag/rdbms/*/*/trace/alert_*.log，以及对应进程的 *.trc/*.trm。
  • 操作系统日志：/var/log/messages、/var/log/syslog、dmesg | tail -n 200。
• 初步性能快照：
  • AWR/ASH（如有权限）：@?/rdbms/admin/awrrpt.sql、@?/rdbms/admin/ashrpt.sql，定位Top SQL与资源争用。
  • 动态视图：v$session、v$lock、v$sql、v$system_event 等，快速识别阻塞会话、锁等待、异常 SQL。

二 常见故障场景与处理要点

三 性能与锁等待定位命令清单

• 会话与阻塞
  • 当前会话与等待：select sid,serial#,username,event,seconds_in_wait,state from v$session where wait_class!='Idle';
  • 阻塞树：select lpad(' ',2*level)||sid||','||serial#||','||username||','||event from v$session connect by prior sid=blocking_session start with blocking_session is null;
• SQL 与执行计划
  • Top SQL（CPU/逻辑读）：select sql_id,sql_text,executions,elapsed_time,cpu_time,disk_reads,buffer_gets from v$sqlarea order by cpu_time desc fetch first 20 rows only;
  • 绑定变量与执行计划：select * from table(dbms_xplan.display_cursor('&sql_id',null,'ALLSTATS LAST'));
  • 跟踪与格式化：alter session set sql_trace=true; ... tkprof <trace_file> <out_file> sys=no sort=prsela,exeela,fchela;
• 等待事件与历史
  • AWR/ASH：生成报告定位 Top 10 前台事件、SQL、实例活动；必要时查询 dba_hist_active_sess_history 回溯时段内问题会话与 SQL。

四 善后验证与长期监控

• 验证：确认实例为 OPEN、监听正常、关键业务可连接；复核 alert.log 无新错误；对比优化前后 AWR/ASH 指标与等待事件。
• 临时与根本：必要时采取杀阻塞会话、限流、SQL 改写/索引优化、参数调整等临时措施；随后完成根因修复并回归验证。
• 监控与预防：建立对CPU/内存/IO/网络、表空间使用、告警日志的持续监控与基线对比；保留常用 SQL 脚本与回滚预案，便于快速处置复发问题。