深入了解linux系统文件与日志分析
inode与block概述
文件数据包括元信息与实际数据
文件存储在硬盘上，硬盘最小存储单元是“扇区
block 8个扇区（512字节）=4k（一个最小的存储单位）一个完整的文件，包含元信息和block
系统加载文件时，是直接找inode节点
inode
查看inode号码的方法
方法一：ls -l 文件名
方法二：stat 文件名
执行“df -i”命令即可查看每个硬盘分区对应的inode总数和已经使用的inode数量
通过inode号的删除命令
find ./ -inum 52305140 -exec rm -i {} ;
或
find ./ -inum 50464299 -delete
inode节点耗尽故障模拟处理
使用fdisk创建分区/dev/sdb1，分区大小30M即可
fdisk /dev/sdb
mkfs.ext4 /dev/sdb1
mkdir /test
mount .dev/sdb1 /mnt
df -i
模拟inode节点耗尽故障
for ((i=1;1<=7680;i++));do touch /test/file$i;done
或
touch(1..7680).txt
df -i
df -hT
删除文件恢复inode
rm -rf /test/*
df -i
df -hT
硬链接与软链接
链接文件的分类
软链接（符号链接） 硬链接
删除原始文件后 失效 仍旧可用
使用范围 适用于文件或目录 只可用于文件
保存位置 与原始文件可以位于不同的文件系统中
必须与原始文件在同一个文件系统（如一个Linux分区）内
如何建立链接
硬链接：ln 源文件 目标位置
软链接：ln -s 源文件或目录 链接文件或目标位置
恢复误删除的文件
恢复EXT类型的文件
下载官网压缩包extundelete
wget http://nchc.dl.sourceforge.net/project/extundelete/extundelete/0.2.4/extundelete-0.2.4.tar.bz2
模拟恢复EXT类型的文件
使用fdisk创建分区/dev/sdc1,格式化ext3文件系统
fdisk /dev/sdc
partprobe /dev/sdc
mkfs.ext3 /dev/sdc1
mkdir /test
mount /dev/sdc1 /test
df -hT
yum -y inatll e2fsprogs-devel e2fsprogs-libs
编译安装extundelete
cd /test
tar jxvf extundelete-0.2.4.tar.bz2
cd extundlete-0.2.4/
./configure --prefix=/usr/local/extundelete && make && make install
ln -s /usr/local/extundelete/bin/* /usr/bin/
模拟删除并执行恢复操作
cd /test
echo a>a
echo a>b
echo a>c
echo a>d
ls
extundelete /dev/sdc1 --inode 2
##查看文件系统/dev/sdc1下存在哪些文件，i节点是从2开始的，2代表该文件系统最开始的目录
rm -rf a b
extundelete /dev/sdc1 --inode 2
cd ~
umount /test
extundelete /dev/sdc1 --restore -all
##恢复/dev/sdc1文件系统下的所有内容
在当前目录下会出现一个RECOVERD_FILES/目录，里面保存了已经恢复的文件
ls RECOVERD_FILES/
XFS文件的备份和恢复
使用fdisk创建分区/dev/sdb1，格式化xfs文件系统
fdisk /dev/sdb
partprobe /dev/sdb
mkfs.xfs [-f] /dev/sdb1
mkdir /data
mount /dev/sdb1 /data/
cd /data
cp /etc/passwd ./
mkdir test
touch test/a
使用xfsdump命令备份整个分区
rpm -qa | grep xfsdump
yum install -y xfsdump
xfsdump -f /opt/dump_sdb1 /dev/sdb1 [-L dump_sdb1 -M sdb1]
模拟数据丢失并使用xfsrestore命令恢复文件
cd /data
rm -rf ./*
ls
xfsrestore -f /opt/dump_sdb1 /data/
日志文件
日志文件的分类
内核及系统日志
由系统服务rsyslog统一进行管理 ，日志格式基本相似
主配置文件/etc/rsyslog.conf
用户日志
记录系统用户登录及退出系统的相关信息
程序日志
由各种应用程序独立管理的日志文件，记录格式不统一
日志的保存位置
默认位于：/var/log目录下
主要日志类型 默认所在位置 说明
内核及公共消息日志 /var/log/messages 记录Linux内核消息及各种应用程序的公共日志消息，包括启动、IO错误、网络错误、程序故障等。
对于未使用独立日志文件的应用程序或服务，一般都可以从该日志文件中获得相关的事件记录信息
计划任务日志 /var/log/cron 记录crontab计划任务产生的事件信息
系统引导日志 /var/log/dmesg 记录Linux系统在引导过程中的各种事件信息
邮件系统日志 /var/log/maillog 记录进入或付出系统的电子邮件活动
用户登录日志 /var/log/secure 记录用户认证相关的安全事件信息
/var/log/lastlog 记录每个用户最近的登陆事件，二进制格式
/var/log/wtmp 记录每个用户登录、注销及系统启动和停机事件，二进制格式
/var/run/btmp 记录失败的、错误的登录尝试及验证事件，二进制格式
日志消息的级别
级号 消息 级别 说明
0 EMERG 紧急 会导致主机系统不可用的情况
1 ALERT 警告 必须马上采取措施解决的问题
2 CRIT 严重 比较严重的情况
3 ERR 错误 运行出现错误
4 WARNING 提醒 可能hi影响系统功能的事件
5 NOTICE 注意 不会影响系统但值得注意
6 INFO 信息 一般信息
7 DEBUG 调试 程序或系统调试信息等
公共日志文件的记录格式
一般由时间标签、主机名、子系统名、消息字段组成
字段 说明
时间标签 消息发出的日期和时间
主机名 生成消息的计算机的名称
子系统名称 发出消息的应用程序的名称
消息 消息的具体内容
用户日志分析
用户日志功能
保存了用户登录、退出系统等相关信息
日志位置 记录事项
/var/log/lastlog最近的用户登录事件
/var/log/wtmp 用户登录、注销及系统开、关机事件
/var/log/utmp 当前登录的每个用户的详细信息
/var/log/secure 与用户验证相关的安全性事件
分析工具
users、who、w、last、lastb
last命令用于查询成功登录到系统的用户记录
lastb命令用于查询登陆失败的用户记录
程序日志分析
常用的程序日志
由相应的应用程序独立进行管理
1.Web服务：/var/log/httpd/
access_log //记录客户访问事件
error_log //记录错误事件
2.代理服务：/var/log/squid/
access.log
cache.log
分析工具
1.文本查看、grep过滤检索、Webmin管理套件中查看
2.awk、sed等文本过滤、格式化编辑工具
3.Webalizer、Awstats等专用日志分析工具
日志管理策略
1.及时做好备份和归档
2.延长日志保存期限
find ./ -mtime +30 -exec rm -rf {} ; 删除30天以前的日志文件
3.控制日志访问权限
日志中可能会包含各类敏感信息，如账户、口令等
4.集中管理日志
将服务器的日志文件发到统一的日志文件服务器
便于日志信息的统一收集、整理和分析
杜绝日志信息的意外丢失、恶意篡改或删除
