shell常用脚本（转）
Menu
1、用shell脚本批量建立Linux用户
2、 编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：
3、通过apache访问日志access.log 统计IP和每个地址访问的次数，按访问量列出前10名。
4、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。
5、监控主机的磁盘空间,当使用空间超过90％就通过发mail来发警告
6、自动ftp上传
7、编写shell脚本，获取本机的网络地址。
8、某系统管理员需要每天做一定的重复工作，编制一个解决方案：
(1)从下午4：50 删除/abc 目录下的全部子目录和全部文件；
(2)从早上8：00～下午6：00 每小时读取/xyz 目录下x1 文件中每行第一个域的全部数
据加入到/backup 目录下的back01.txt 文件内；
(3)每逢周一下午5：50 将/data 目录下的所有目录和文件归档并压缩为文件
backup.tar.gz;
(4)在下午5：55 将IDE 接口的CD－ROM 缷载（假设CD－ROM 的设备名为hdc）;
(5)在早上8：00 前开机后启动。
9．设计一个shell程序，添加一个新组为class1，然后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30
10．编写shell程序，实现自动删除50个账号的功能。账号名为stud1至stud50。
Answer:
1、用shell脚本批量建立Linux用户
实现要求：创建用户student1到student50,指定组为student组！而且每个用户需要设定一个不同的密码！
脚本实现如下：
not this is a test
#!/bin/bash
for i in `seq 1 50`
do
useradd -G student student$i ;
echo student$i | passwd student$i --stdin;
done
【说明：Linux下 Passwd有参数
--stdin
This option is used to indicate that passwd should read the new password from standard input, which can be a pipe.
所以linux下自动改变用户密码的办法就是:
Echo 密码 |passwd –stdin 用户名
】
设置相同的密码
#!/bin/bash
password="123456"
for USER in user1 user2 user3
do
useradd -m $USER
echo -e "${password}\n${password}" | passwd $USER
done
【说明：
echo -n 不换行输出：
$echo -n "123"
$echo "456"
最终输出
123456
而不是
123
456
echo -e 处理特殊字符：
\n 换行且光标移至行首 】
ok,就这么一个简单的脚本，就可以再系统里批量生成账号了。而且密码跟账号的名字一样。
这就是for do done语句用法。
2、 编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：
!/bin/bash
for FILE in `ls /usr/local/test`
do
if [ -f $FILE ] ; then
if [ `ls -l $FILE | awk `{print $5}` -gt 100000 ] ; then
mv $FILE /tmp/
fi
fi
done
================
#!/bin/bash
for FileName in `ls -l /usr/local/test | awk '$5>102400' {print $9}`
do
mv $FileName /tmp/
done
ls -al /tmp/
echo "done!"
3、通过apache访问日志access.log 统计IP和每个地址访问的次数，按访问量列出前10名。
日志格式样例如下：
192.168.1.247 ---【02/jul/2010:23:44:59 + 8080 】 "GET /HTTP/1/1" 200 19
答案：
cat access.log | awk '{print $1}' |sort| uniq -c |sort -rn |head -10
（uniq 参数说明：– c 显示输出中，在每行行首加上本行在文件中连续出现的次数。
sort参数说明：sort默认的排序方式是升序，-r 参数就会改变成倒叙；你有没有遇到过10比2小的情况。我反正遇到过。
出现这种情况是由于排序程序将这些数字按字符来排序了，排序程序会先比较1和2，显然1小，所以就将
10放在2前面喽。这也是sort的一贯作风。）
4、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。
a、 首先两台机器要建立服务器间的信任关系。
b、脚本：
#！/bin/bash
FSMAX="80"
remote_user='root'
remote_ip=(IP地址列表)
ip_num='0'
while [ "$ip_num" -le "$(expr ${#remote_ip[@]} -l)"]
do
read_num='1'
ssh "$remote_user"@"${remote_ip[$ip_num]}" df -h > /tmp/diskcheck_tmp
grep '^/dev/*' /tmp/diskcheck_tmp | awk '{print $5}'|sed 's/\%//g' > /tmp/diskcheck_num_tmp
while [ "$read_num" -le $(wc -l < /tmp/diskcheck_num_tmp) ]
do
size=$(sed -n "$read_num" 'p' /tmp/diskcheck_num_tmp)
if [ "size" -gt "$FSMAX" ]
then
$(grep '^/dev/*' /tmp/diskcheck_tmp |sed -n $read_num'p' > /tmp/disk_check_mail)
$(echo ${remote_ip[$ip_num]}) >> /tmp/disk_check_mail)
$(mail -s "diskcheck_alert" admin < /tmp/disk_check_mail)
fi
read_num=$(expr $read_num + 1)
done
ip_num=$(expr $ip_num + 1)
done
=写入crontab===
0/10 * * * * /home/diskcheck.sh 2&>1
5、监控主机的磁盘空间,当使用空间超过90％就通过发mail来发警告
#!/bin/bash
#monitor available disk space
#提取本服务器的IP地址信息
IP=`ifconfig eth0 | grep "inet addr" | cut -f 2 -d ":" | cut -f 1 -d " "`
SPACE=` df -hP | awk '{print int($5)}'`
if [ $SPACE -ge 90 ]
then
echo "$IP 服务器 磁盘空间 使用率已经超过90%，请及时处理。"|mail -s "$IP 服务器硬盘告警" fty89@163.com
fi
6、自动ftp上传
#! /bin/bash
ftp -n << END_FTP
open 192.168.1.22
user test testing //用户名test 密码：testing
binary
prompt off //关闭提示
mput files //上传files文件
close
bye
END_FTP
7、编写shell脚本，获取本机的网络地址。比如：本机的ip地址是：
192.168.100.5/255.255.255.0,
那么他的网络地址是：
192.168.100.1/255.255.255.0
方法一：
#！/bin/bash
IP=ifconfig eth0|grep 'inet addr'|sed 's/^.*addr://g'|awk '{print $1}'
NETMASK=ifconfig eth0 |grep "inet addr"|sed 's/^.*Mask://g'
echo "$IP/&NETMASK"
exit
方法二：
#!/bin/bash
#This script print ip and network
file="/etc/sysconfig/network-scripts/ifcfg-eth0"
if [ -f $file ] ;then
IP=`grep "IPADDR" $file|awk -F"=" '{ print $2 }'`
MASK=`grep "NETMASK" $file|awk -F"=" '{ print $2 }'`
echo "$IP/$MASK"
exit 1
fi
IP地址也可这样获取：
IP=`ifconfig eth0 | grep "inet addr" | cut -f 2 -d ":" | cut -f 1 -d " "
子网掩码：
NETMASK= `ifconfig eth0 | grep "inet addr"|cut -f 4 -d ":"
8、某系统管理员需要每天做一定的重复工作，编制一个解决方案：
(1)从下午4：50 删除/abc 目录下的全部子目录和全部文件；
(2)从早上8：00～下午6：00 每小时读取/xyz 目录下x1 文件中每行第一个域的全部数
据加入到/backup 目录下的back01.txt 文件内；
(3)每逢周一下午5：50 将/data 目录下的所有目录和文件归档并压缩为文件
backup.tar.gz;
(4)在下午5：55 将IDE 接口的CD－ROM 缷载（假设CD－ROM 的设备名为hdc）;
(5)在早上8：00 前开机后启动。
答案：
（a）用vi创建编辑一个名为prgx的crontab文件；
（b）prgx文件的内容：
50 16 * * * rm -r /abc/*
0 8-18/1 * * * cut -f1 /xyz/x1 >> /backup/bak01.txt
50 17 * * * tar zcvf backup.tar.gz /data
55 17 * * * umount /dev/hdc
（c）由超级用户登录，用crontab执行 prgx文件中的内容：
root@xxx:#crontab prgx；
在每日早晨8:00之前开机后即可自动启动crontab
9．设计一个shell程序，添加一个新组为class1，然后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30
参考答案：
#!/bin/sh
i=1
groupadd class1
while [ $i -le 30 ]
do
if [ $i -le 9 ] ;then
USERNAME=stu0${i}
else
USERNAME=stu${i}
fi
useradd $USERNAME
mkdir /home/$USERNAME
chown -R $USERNAME /home/$USERNAME
chgrp -R class1 /home/$USERNAME
i=$(($i+1))
done
10．编写shell程序，实现自动删除50个账号的功能。账号名为stud1至stud50。
参考程序：
#!/bin/sh
i=1
while [ $i -le 50 ]
do
userdel -r stud${i}
i=$(($i+1 ))
done
11．设计一个shell程序，在每月第一天备份并压缩/etc目录的所有内容，存放在/root/bak目录里，且文件名为如下形式yymmdd_etc，yy为年，mm为月，dd为日。Shell程序fileback存放在/usr/bin目录下。
参考答案：
（1）编写shell程序fileback：
#!/bin/sh
DIRNAME=`ls /root | grep bak`
if [ -z "$DIRNAME" ] ; then
mkdir /root/bak
cd /root/bak
fi
BACKETC=$(date +%Y%m%d)_etc.tar.gz
tar zcvf $BACKETC /etc
echo "fileback finished!"
（2）编写任务定时器：
echo "0 0 1 * * /bin/sh /usr/bin/fileback" >; /root/etcbakcron
crontab /root/etcbakcron
或使用crontab -e 命令添加定时任务：
0 1 * * * /bin/sh /usr/bin/fileback
12．有一普通用户想在每周日凌晨零点零分定期备份/user/backup到/tmp目录下，该用户应如何做？
参考答案：
（1）第一种方法：
用户应使用crontab –e 命令创建crontab文件。
格式如下：
0 0 * * sun cp –r /user/backup /tmp
（2）第二种方法：
用户先在自己目录下新建文件file，文件内容如下：
0 * * sun cp –r /user/backup /tmp
然后执行 crontab file 使生效。
13．设计一个Shell程序，在/userdata目录下建立50个目录，即user1～user50，并设置每个目录的权限，其中其他用户的权限为：读；文件所有者的权限为：读、写、执行；文件所有者所在组的权限为：读、执行。
参考答案:
建立程序 Pro16如下：
#!/bin/sh
i=1
while [ i -le 50 ]
do
if [ -d /userdata ];then
mkdir -p -m 754 /userdata/user$i 加上-m 754 就不用写下面那一句了 -p 是递归建立目录
#chmod 754 /userdata/user$i
echo "user$i"
let "i = i + 1" （或i=$(($i+1))
else
mkdir /userdata
mkdir -p -m /userdata/user$i
#chmod 754 /userdata/user$i
echo "user$i"
let "i = i + 1" （或i=$（（$i＋1））
fi
done
13.1 mysql备份实例，自动备份mysql，并删除30天前的备份文件
#!/bin/sh
#auto backup mysql
#wugk 2012-07-14
#PATH DEFINE
BAKDIR=/data/backup/mysql/`date +%Y-%m-%d`
MYSQLDB=www
MYSQLPW=backup
MYSQLUSR=backup
if[ $UID -ne 0 ];then
echo This script must use administrator or root user ,please exit!
sleep 2
exit 0
fi
if[ ! -d $BAKDIR ];then
mkdir -p $BAKDIR
else
echo This is $BAKDIR exists ,please exit ….
sleep 2
exit
fi
###mysqldump backup mysql
/usr/bin/mysqldump -u$MYSQLUSR -p$MYSQLPW -d $MYSQLDB >/data/backup/mysql/`date +%Y-%m-%d`/www_db.sql
cd $BAKDIR ; tar -czf www_mysql_db.tar.gz *.sql
cd $BAKDIR ;find . -name “*.sql” |xargs rm -rf[ $? -eq 0 ]&&echo “This `date +%Y-%m-%d` RESIN BACKUP is SUCCESS”
cd /data/backup/mysql/ ;find . -mtime +30 |xargs rm -rf
13.2 批量解压tar脚本，批量解压zip并且建立当前目录
#!/bin/sh
PATH1=/tmp/images
PATH2=/usr/www/images
for i in `ls ${PATH1}/*`
do
tar xvf $i -C $PATH2
done
这个脚本是针对所有tar文件在一个目录，但是实际情况中，有可能在下级或者更深的目录，我们可以使用find查找
#!/bin/sh
PATH1=/tmp/images
PATH2=/usr/www/images
for i in `find $PATH1 -name “*.tar” `
do
tar xvf $i -C $PATH2
done
如果是zip文件，例如123189.zip 132342.zip 等等批量文件，默认unzip直接解压不带自身目录，意思是解压123189.zip完当前目录就是图片，不能创建123189目录下并解压，可以用shell脚本实现
#!/bin/sh
PATH1=/tmp/images
PATH2=/usr/www/images
cd $PATH1
for i in `find . -name ”*.zip”|awk -F. {print $2} `
do
mkdir -p PATH2$i
unzip -o .$i.zip -d PATH2$i
done
13.3
14.从1叠加到100
echo $[$(echo +{1..100})]
echo $[(100+1)*(100/2)]
seq -s '+' 100 |bc
15.判断参数是否为空-空退出并打印null
#!/bin/sh
echo $1
name=${1:?"null"}
echo $name
16.循环数组
for ((i=0;i<${#o[*]};i++))
do
echo ${o[$i]}
done
17. 判断路径是否存在
if [ -d /root/desktop/text/123 ];then
echo "找到了123"
if [ -d /root/desktop/text ]
then echo "找到了text"
else echo "没找到text"
fi
else echo "没找到123文件夹"
fi
18.找出出现次数最多
awk '{print $1}' file|sort |uniq -c|sort -k1r
19. 判断脚本参数是否正确
./test.sh -p 123 -p 3306 -h 127.0.0.1 -u root
#!/bin/sh
if [ $# -ne 8 ];then
echo "usage: $0 -u user -p passwd -p port -h host"
exit 1
fi
while getopts :u:p:p:h: name
do
case $name in
u)
mysql_user=$optarg
;;
p)
mysql_passwd=$optarg
;;
p)
mysql_port=$optarg
;;
h)
mysql_host=$optarg
;;
*)
echo "usage: $0 -u user -p passwd -p port -h host"
exit 1
;;
esac
done
if [ -z $mysql_user ] || [ -z $mysql_passwd ] || [ -z $mysql_port ] || [ -z $mysql_host ]
then
echo "usage: $0 -u user -p passwd -p port -h host"
exit 1
fi
echo $mysql_user $mysql_passwd $mysql_port $mysql_host
20.打印表格
#!/bin/sh
clear
awk 'begin{
print "+--------------------+--------------------+";
printf "|%-20s|%-20s|\n","name","number";
print "+--------------------+--------------------+";
}'
a=`grep "^[a-z]" a.txt |sort +1 -n |awk '{print $1":"$2}'`
#cat a.txt |sort +1 -n |while read list
for list in $a
do
name=`echo $list |awk -f: '{print $1}'`
number=`echo $list |awk -f: '{print $2}'`
awk 'begin{printf "|%-20s|%-20s|\n","'"$name"'","'"$number"'";
print "+--------------------+--------------------+";
}'
done
awk 'begin{
print " *** the end *** "
print " "
}'
21.判断日期是否合法
#!/bin/sh
while read a
do
if echo $a | grep -q "-" && date -d $a +%y%m%d > /dev/null 2>&1
then
if echo $a | grep -e '^[0-9]\{4\}-[01][0-9]-[0-3][0-9]$'
then
break
else
echo "您输入的日期不合法，请从新输入！"
fi
else
echo "您输入的日期不合法，请从新输入！"
fi
done
echo "日期为$a"
22.打印日期段所有日期
#!/bin/bash
qsrq=20010101
js rq=20010227
n=0
>tmp
while :;do
current=$(date +%y%m%d -d"$n day $qsrq")
if [[ $current == $js rq ]];then
echo $current >>tmp;break
else
echo $current >>tmp
((n++))
fi
done
rq=`awk 'nr==1{print}' tmp`
23.打印提示
cat <<eof
#内容
eof
24. 取用户的根目录
#! /bin/bash
while read name pass uid gid gecos home shell
do
echo $home
done < /etc/passwd
25. 查找连续多行，在不连续的行前插入
#/bin/bash
lastrow=null
i=0
cat incl|while read line
do
i=`expr $i + 1`
if echo "$lastrow" | grep "#include <[a-z].h>"
then
if echo "$line" | grep -v "#include <[a-z].h>"
then
sed -i ''$i'i\\/\/all header files are include' incl
i=`expr $i + 1`
fi
fi
lastrow="$line"
done
26.查询其他数据库 其它引擎
#/bin/bash
path1=/data/mysql/data/
dbpasswd=db123
#myisam或innodb
engine=innodb
if [ -d $path1 ];then
dir=`ls -p $path1 |awk '/\/$/'|awk -f'/' '{print $1}'`
for db in $dir
do
number=`mysql -uroot -p$dbpasswd -a -s "$path1"mysql.sock -e "use ${db};show table status;" |grep -c $engine`
if [ $number -ne 0 ];then
echo "${db}"
fi
done
fi
27.批量修改其他数据库引擎
#/bin/bash
for db in test test1 test3
do
tables=`mysql -uroot -pdb123 -a -s /data/mysql/data/mysql.sock -e "use $db;show tables;" |awk 'nr != 1{print}'`
for table in $tables
do
mysql -uroot -pdb123 -a -s /data/mysql/data/mysql.sock -e "use $db;alter table $table engine=myisam;"
done
done
28.将shell取到的数据插入mysql其他数据库
mysql -u$username -p$passwd -h$dbhost -p$dbport -a -e "
use $dbname;
insert into data values ('','$ip','$date','$time','$data')
"
29.两日期间隔天数
d1=`date -d '20070409' +"%s"`
d2=`date -d '20070304 ' +"%s"`
d3=$(($d1 - $d2))
echo $(($d3/60/60/24))
30. ssh批量执行命令
#版本1
#!/bin/bash
while read line
do
ip=`echo $line|awk '{print $1}'`
passwd=`echo $line|awk '{print $2}'`
ssh -n localhost "cat -"
sshpass -p "$passwd" ssh -n -t -o stricthostkeychecking=no root@$ip "id"
done<iplist.txt
#版本2
#!/bin/bash
iplist=`awk '{print $1}' iplist.txt`
for ip in $iplist
do
passwd=`awk '/'$ip'/{print $2}' iplist.txt`
sshpass -p "$passwd" ssh -n -t -o stricthostkeychecking=no root@$ip "id"
done
31.多进程后台并发控制
#!/bin/bash
test () {
echo $a
sleep 5
}
for a in `seq 1 30`
do
test &
echo $!
((num++))
if [ $num -eq 6 ];then
echo "wait..."
wait
num=0
fi
done
wait
32.恢复rm删除的文件
debugfs针对 ext2
ext3grep针对 ext3
extundelete针对 ext4
df -t # 首先查看磁盘分区格式
umount /data/ # 卸载挂载,数据丢失请首先卸载挂载,或重新挂载只读
ext3grep /dev/sdb1 --ls --inode 2 # 记录信息继续查找目录下文件inode信息
ext3grep /dev/sdb1 --ls --inode 131081 # 此处是inode
ext3grep /dev/sdb1 --rest ore-inode 49153 # 记录下inode信息开始恢复目录
this is a failure to select atom!
don't open vim mode
don't open vim-mode
instant vim not installed
it is pity that the vim-instant function can't be
installed correctly!
good night boy!
ace in beijin
参考<http://guoyueheng148.blog.163.com/blog/static/6016709120140209413480/>
