07.系统故障分析与排查.ppt

第七章 系统故障分析与排查 本章结构 日志分析及管理 日志的功能 用于记录系统、程序运行中发生的各种事件 通过阅读日志，有助于诊断和解决系统故障 日志文件的分类 内核及系统日志 由系统服务syslog统一进行管理，日志格式基本相似 用户日志 记录系统用户登录及退出系统的相关信息 程序日志 由各种应用程序独立管理的日志文件，记录格式不统一 日志分析及管理 日志保存位置 默认位于：/var/log 目录下 主要日志文件介绍 内核及公共消息日志：/var/log/messages 计划任务日志：/var/log/cron 系统引导日志：/var/log/dmesg 邮件系统日志：/var/log/maillog 用户登录日志：/var/log/lastlog、/var/log/secure、/var/log/wtmp、/var/run/utmp …… 内核及系统日志 由系统服务 syslogd 统一管理 软件包：sysklogd-1.4.1-39.2 主要程序：/sbin/klogd、/sbin/syslogd 配置文件：/etc/syslog.conf 内核及系统日志 日志消息的级别 0 EMERG（紧急）：会导致主机系统不可用的情况 1 ALERT（警告）：必须马上采取措施解决的问题 2 CRIT（严重）：比较严重的情况 3 ERR（错误）：运行出现错误 4 WARNING（提醒）：可能会影响系统功能的事件 5 NOTICE（注意）：不会影响系统但值得注意 6 INFO（信息）：一般信息 7 DEBUG（调试）：程序或系统调试信息等 内核及系统日志 日志记录的一般格式 用户日志分析 保存了用户登录、退出系统等相关信息 /var/log/lastlog：最近的用户登录事件 /var/log/wtmp：用户登录、注销及系统开、关机事件 /var/run/utmp：当前登录的每个用户的详细信息 /var/log/secure：与用户验证相关的安全性事件 分析工具 who、w、user、last、ac 程序日志分析 由相应的应用程序独立进行管理 Web服务：/var/log/httpd/ access_log、error_log 代理服务：/var/log/squid/ access.log、cache.log、squid.out、store.log FTP服务：/var/log/xferlog …… 分析工具 文本查看、grep过滤检索、Webmin管理套件中查看 awk、sed等文本过滤、格式化编辑工具 Webalizer、Awstats等专用日志分析工具 日志管理策略 及时作好备份和归档 延长日志保存期限 控制日志访问权限 日志中可能会包含各类敏感信息，如账户、口令等 集中管理日志 便于日志信息的统一收集、整理和分析 杜绝日志信息的意外丢失、恶意篡改或删除 日志管理策略 应用示例： 调整syslogd服务设置，建立集中管理的日志服务器 将客户机B中crond服务产生的日志消息，自动发送到服务器A的/var/log/cron文件中 修复MBR扇区故障 故障原因 病毒、木马等造成的破坏 不正确的分区操作、磁盘读写误操作 故障现象 找不到引导程序，启动中断 无法加载操作系统，开机后黑屏 解决思路 应提前作好备份文件 以RHEL5安装光盘引导进入急救模式 从备份文件中恢复 修复MBR扇区故障 应用示例： 1.备份MBR扇区数据 dd if=/dev/sda of=/backup/sda.mbr.bak bs=512 count=1 2.模拟MBR被破坏的故障 dd if=/dev/zero of=/dev/sda bs=512 count=1 3.RHEL5光盘引导，进入急救模式 boot: linux rescue 4.从备份文件中恢复MBR扇区 dd if=/tempdir/sda.mbr.bak of=/dev/sda bs=512 count=1 修复GRUB引导故障 故障原因 MBR中的GRUB引导程序遭到破坏 grub.conf文件丢失、引导配置有误 故障现象 系统引导停滞，显示“grub”提示符 解决思路 尝试手动输入引导命令 进入急救模式，从备份中恢复 grub.conf 向MBR扇区中重建grub程序 修复GRUB引导故障 应用示例1： 在“grub”提示符后，手动输入引导命令 成功进入系统后，恢复或重建 grub.conf 配置文件 修复GRUB引导故障 应用示例2： 进入急救模式，从备份文件中恢复 grub.conf 文件 向MBR扇区中重建GRUB程序 /etc/inittab文件丢失 故障原因 inittab文件被误删除，或者存在配置错误 故障现象 启动中提示