shell常用脚本（转）

Menu
1、用shell脚本批量建立Linux用户
2、编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：
3、通过apache访问日志access.log 统计IP和每个地址访问的次数，按访问量列出前10名。
4、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。
5、监控主机的磁盘空间,当使用空间超过90％就通过发mail来发警告
6、自动ftp上传
7、编写shell脚本，获取本机的网络地址。
8、某系统管理员需要每天做一定的重复工作，编制一个解决方案：
(1)从下午4：50 删除/abc 目录下的全部子目录和全部文件；
(2)从早上8：00～下午6：00 每小时读取/xyz 目录下x1 文件中每行第一个域的全部数
据加入到/backup 目录下的back01.txt 文件内；
(3)每逢周一下午5：50 将/data 目录下的所有目录和文件归档并压缩为文件
backup.tar.gz;
(4)在下午5：55 将IDE 接口的CD－ROM 缷载（假设CD－ROM 的设备名为hdc）;
(5)在早上8：00 前开机后启动。
9．设计一个shell程序，添加一个新组为class1，然后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30
10．编写shell程序，实现自动删除50个账号的功能。账号名为stud1至stud50。

Answer:

1、用shell脚本批量建立Linux用户

实现要求：创建用户student1到student50,指定组为student组！而且每个用户需要设定一个不同的密码！
脚本实现如下：

not this is a test

!/bin/bash

for i in seq 1 50
do
useradd -G student student$i ;
echo student$i | passwd student$i --stdin;
done

【说明：Linux下 Passwd有参数

　　--stdin

　　This option is used to indicate that passwd should read the new password from standard input, which can be a pipe.

　　所以linux下自动改变用户密码的办法就是:

　　Echo 密码 |passwd –stdin 用户名
】

设置相同的密码

!/bin/bash

password="123456"
for USER in user1 user2 user3
do
useradd -m $USER
echo -e "${password}\n${password}" | passwd $USER
done
【说明：
echo -n 不换行输出：
$echo -n "123"
$echo "456"

最终输出
123456
而不是
123
456
echo -e 处理特殊字符：
\n 换行且光标移至行首】

ok,就这么一个简单的脚本，就可以再系统里批量生成账号了。而且密码跟账号的名字一样。
这就是for do done语句用法。

2、编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：

!/bin/bash

for FILE in ls /usr/local/test
do
if [ -f $FILE ] ; then
if [ `ls -l $FILE | awk `{print $5}` -gt 100000 ] ; then
mv $FILE /tmp/
fi
fi
done

================

!/bin/bash

for FileName in ls -l /usr/local/test | awk '$5>102400' {print $9}
do
mv $FileName /tmp/
done
ls -al /tmp/
echo "done!"

3、通过apache访问日志access.log 统计IP和每个地址访问的次数，按访问量列出前10名。

日志格式样例如下：
192.168.1.247 ---【02/jul/2010:23:44:59 + 8080 】 "GET /HTTP/1/1" 200 19

答案：

cat access.log | awk '{print $1}' |sort| uniq -c |sort -rn |head -10

（uniq 参数说明：– c 显示输出中，在每行行首加上本行在文件中连续出现的次数。
sort参数说明：sort默认的排序方式是升序，-r 参数就会改变成倒叙；你有没有遇到过10比2小的情况。我反正遇到过。
出现这种情况是由于排序程序将这些数字按字符来排序了，排序程序会先比较1和2，显然1小，所以就将
10放在2前面喽。这也是sort的一贯作风。）

4、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。

a、首先两台机器要建立服务器间的信任关系。
b、脚本：

！/bin/bash

FSMAX="80"
remote_user='root'
remote_ip=(IP地址列表)
ip_num='0'

while [ "$ip_num" -le "$(expr ${#remote_ip[@]} -l)"]
do
read_num='1'
ssh "$remote_user"@"${remote_ip[$ip_num]}" df -h > /tmp/diskcheck_tmp
grep '^/dev/*' /tmp/diskcheck_tmp | awk '{print $5}'|sed 's/%//g' > /tmp/diskcheck_num_tmp

while [ "$read_num" -le $(wc -l < /tmp/diskcheck_num_tmp) ]
do
size=$(sed -n "$read_num" 'p' /tmp/diskcheck_num_tmp)

if [ "size" -gt "$FSMAX" ]
then
$(grep '^/dev/*' /tmp/diskcheck_tmp |sed -n $read_num'p' > /tmp/disk_check_mail)

$(echo ${remote_ip[$ip_num]}) >> /tmp/disk_check_mail)
$(mail -s "diskcheck_alert" admin < /tmp/disk_check_mail)
fi

read_num=$(expr $read_num + 1)

done

ip_num=$(expr $ip_num + 1)
done
=写入crontab===
0/10 * * * * /home/diskcheck.sh 2&>1

5、监控主机的磁盘空间,当使用空间超过90％就通过发mail来发警告

!/bin/bash

monitor available disk space

提取本服务器的IP地址信息

IP=ifconfig eth0 | grep "inet addr" | cut -f 2 -d ":" | cut -f 1 -d " "
SPACE= df -hP | awk '{print int($5)}'
if [ $SPACE -ge 90 ]
then
echo "$IP 服务器磁盘空间使用率已经超过90%，请及时处理。"|mail -s "$IP 服务器硬盘告警" fty89@163.com
fi

6、自动ftp上传

! /bin/bash

ftp -n << END_FTP
open 192.168.1.22
user test testing //用户名test 密码：testing
binary
prompt off //关闭提示
mput files //上传files文件
close
bye
END_FTP

7、编写shell脚本，获取本机的网络地址。比如：本机的ip地址是：

192.168.100.5/255.255.255.0,
那么他的网络地址是：
192.168.100.1/255.255.255.0

方法一：

！/bin/bash

IP=ifconfig eth0|grep 'inet addr'|sed 's/^.addr://g'|awk '{print $1}'
NETMASK=ifconfig eth0 |grep "inet addr"|sed 's/^.Mask://g'

echo "$IP/&NETMASK"
exit

方法二：

!/bin/bash

This script print ip and network

file="/etc/sysconfig/network-scripts/ifcfg-eth0"
if [ -f $file ] ;then
IP=grep "IPADDR" $file|awk -F"=" '{ print $2 }'
MASK=grep "NETMASK" $file|awk -F"=" '{ print $2 }'
echo "$IP/$MASK"
exit 1
fi

IP地址也可这样获取：

IP=`ifconfig eth0 | grep "inet addr" | cut -f 2 -d ":" | cut -f 1 -d " "

子网掩码：

NETMASK= `ifconfig eth0 | grep "inet addr"|cut -f 4 -d ":"

8、某系统管理员需要每天做一定的重复工作，编制一个解决方案：

(1)从下午4：50 删除/abc 目录下的全部子目录和全部文件；

(2)从早上8：00～下午6：00 每小时读取/xyz 目录下x1 文件中每行第一个域的全部数
据加入到/backup 目录下的back01.txt 文件内；

(3)每逢周一下午5：50 将/data 目录下的所有目录和文件归档并压缩为文件
backup.tar.gz;

(4)在下午5：55 将IDE 接口的CD－ROM 缷载（假设CD－ROM 的设备名为hdc）;

(5)在早上8：00 前开机后启动。

答案：

（a）用vi创建编辑一个名为prgx的crontab文件；

（b）prgx文件的内容：

50 16 * * * rm -r /abc/*
0 8-18/1 * * * cut -f1 /xyz/x1 >> /backup/bak01.txt
50 17 * * * tar zcvf backup.tar.gz /data
55 17 * * * umount /dev/hdc

（c）由超级用户登录，用crontab执行 prgx文件中的内容：

root@xxx:#crontab prgx；
在每日早晨8:00之前开机后即可自动启动crontab

9．设计一个shell程序，添加一个新组为class1，然后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30

参考答案：

!/bin/sh

i=1
groupadd class1

while [ $i -le 30 ]
do
if [ $i -le 9 ] ;then
USERNAME=stu0${i}
else
USERNAME=stu${i}
fi

useradd $USERNAME

mkdir /home/$USERNAME

chown -R $USERNAME /home/$USERNAME

chgrp -R class1 /home/$USERNAME

i=$(($i+1))

done

10．编写shell程序，实现自动删除50个账号的功能。账号名为stud1至stud50。

参考程序：

!/bin/sh

i=1

while [ $i -le 50 ]

userdel -r stud${i}

i=$(($i+1 ))

done

11．设计一个shell程序，在每月第一天备份并压缩/etc目录的所有内容，存放在/root/bak目录里，且文件名为如下形式yymmdd_etc，yy为年，mm为月，dd为日。Shell程序fileback存放在/usr/bin目录下。

参考答案：

（1）编写shell程序fileback：

!/bin/sh

DIRNAME=ls /root | grep bak
if [ -z "$DIRNAME" ] ; then
mkdir /root/bak
cd /root/bak
fi
BACKETC=$(date +%Y%m%d)_etc.tar.gz
tar zcvf $BACKETC /etc
echo "fileback finished!"

（2）编写任务定时器：

echo "0 0 1 * * /bin/sh /usr/bin/fileback" >; /root/etcbakcron

crontab /root/etcbakcron

或使用crontab -e 命令添加定时任务：

0 1 * * * /bin/sh /usr/bin/fileback

12．有一普通用户想在每周日凌晨零点零分定期备份/user/backup到/tmp目录下，该用户应如何做？

参考答案：

（1）第一种方法：

用户应使用crontab –e 命令创建crontab文件。
格式如下：

0 0 * * sun cp –r /user/backup /tmp

（2）第二种方法：

用户先在自己目录下新建文件file，文件内容如下：

0 * * sun cp –r /user/backup /tmp

然后执行 crontab file 使生效。

13．设计一个Shell程序，在/userdata目录下建立50个目录，即user1～user50，并设置每个目录的权限，其中其他用户的权限为：读；文件所有者的权限为：读、写、执行；文件所有者所在组的权限为：读、执行。

参考答案:

建立程序 Pro16如下：

!/bin/sh

i=1

while [ i -le 50 ]

if [ -d /userdata ];then

mkdir -p -m 754 /userdata/user$i 加上-m 754 就不用写下面那一句了 -p 是递归建立目录

chmod 754 /userdata/user$i

echo "user$i"

let "i = i + 1" （或i=$(($i+1))

else

mkdir /userdata

mkdir -p -m /userdata/user$i

chmod 754 /userdata/user$i

echo "user$i"

let "i = i + 1" （或i=$（（$i＋1））

done

13.1 mysql备份实例，自动备份mysql，并删除30天前的备份文件

!/bin/sh

auto backup mysql

wugk 2012-07-14

PATH DEFINE

BAKDIR=/data/backup/mysql/date +%Y-%m-%d
MYSQLDB=www
MYSQLPW=backup
MYSQLUSR=backup

if[ $UID -ne 0 ];then
echo This script must use administrator or root user ,please exit!
sleep 2
exit 0
fi

if[ ! -d $BAKDIR ];then
mkdir -p $BAKDIR
else
echo This is $BAKDIR exists ,please exit ….
sleep 2
exit
fi

mysqldump backup mysql

/usr/bin/mysqldump -u$MYSQLUSR -p$MYSQLPW -d $MYSQLDB >/data/backup/mysql/date +%Y-%m-%d/www_db.sql

cd $BAKDIR ; tar -czf www_mysql_db.tar.gz *.sql

cd $BAKDIR ;find . -name “*.sql” |xargs rm -rf[ $? -eq 0 ]&&echo “This date +%Y-%m-%d RESIN BACKUP is SUCCESS”

cd /data/backup/mysql/ ;find . -mtime +30 |xargs rm -rf

13.2 批量解压tar脚本，批量解压zip并且建立当前目录

!/bin/sh

PATH1=/tmp/images
PATH2=/usr/www/images
for i in ls ${PATH1}/*
do
tar xvf $i -C $PATH2
done

这个脚本是针对所有tar文件在一个目录，但是实际情况中，有可能在下级或者更深的目录，我们可以使用find查找

!/bin/sh

PATH1=/tmp/images
PATH2=/usr/www/images
for i in find $PATH1 -name “*.tar”
do
tar xvf $i -C $PATH2
done

如果是zip文件，例如123189.zip 132342.zip 等等批量文件，默认unzip直接解压不带自身目录，意思是解压123189.zip完当前目录就是图片，不能创建123189目录下并解压，可以用shell脚本实现

!/bin/sh

PATH1=/tmp/images
PATH2=/usr/www/images
cd $PATH1

for i in find . -name ”*.zip”|awk -F. {print $2}
do

mkdir -p PATH2$i

unzip -o .$i.zip -d PATH2$i
done

13.3 14.从1叠加到100

echo $[$(echo +{1..100})]
echo $[(100+1)*(100/2)]
seq -s '+' 100 |bc

15.判断参数是否为空-空退出并打印null

!/bin/sh

echo $1
name=${1:?"null"}
echo $name

16.循环数组

for ((i=0;i<${#o[*]};i++))
do
echo ${o[$i]}
done

17. 判断路径是否存在

if [ -d /root/desktop/text/123 ];then
echo "找到了123"
if [ -d /root/desktop/text ]
then echo "找到了text"
else echo "没找到text"
fi
else echo "没找到123文件夹"

18.找出出现次数最多

awk '{print $1}' file|sort |uniq -c|sort -k1r

19. 判断脚本参数是否正确

./test.sh -p 123 -p 3306 -h 127.0.0.1 -u root

!/bin/sh

if [ $# -ne 8 ];then
echo "usage: $0 -u user -p passwd -p port -h host"
exit 1
fi

while getopts :u:p:p:h: name
do
case $name in
u)
mysql_user=$optarg
;;
p)
mysql_passwd=$optarg
;;
p)
mysql_port=$optarg
;;
h)
mysql_host=$optarg
;;
*)
echo "usage: $0 -u user -p passwd -p port -h host"
exit 1
;;
esac
done

if [ -z $mysql_user ] || [ -z $mysql_passwd ] || [ -z $mysql_port ] || [ -z $mysql_host ]
then
echo "usage: $0 -u user -p passwd -p port -h host"
exit 1
fi

echo $mysql_user $mysql_passwd $mysql_port $mysql_host

20.打印表格

!/bin/sh

clear
awk 'begin{
print "+--------------------+--------------------+";
printf "|%-20s|%-20s|\n","name","number";
print "+--------------------+--------------------+";
}'
a=grep "^[a-z]" a.txt |sort +1 -n |awk '{print $1":"$2}'
#cat a.txt |sort +1 -n |while read list
for list in $a
do
name=echo $list |awk -f: '{print $1}'
number=echo $list |awk -f: '{print $2}'
awk 'begin{printf "|%-20s|%-20s|\n","'"$name"'","'"$number"'";
print "+--------------------+--------------------+";
}'
done
awk 'begin{
print " *** the end *** "
print " "
}'

21.判断日期是否合法

!/bin/sh

while read a
do
if echo $a | grep -q "-" && date -d $a +%y%m%d > /dev/null 2>&1
then
if echo $a | grep -e '^[1]{4}-[01][0-9]-[0-3][0-9]$'
then
break
else
echo "您输入的日期不合法，请从新输入！"
fi
else
echo "您输入的日期不合法，请从新输入！"
fi
done
echo "日期为$a"

22.打印日期段所有日期

!/bin/bash

qsrq=20010101
js rq=20010227
n=0
>tmp
while :;do
current=$(date +%y%m%d -d"$n day $qsrq")
if [[ $current == $js rq ]];then
echo $current >>tmp;break
else
echo $current >>tmp
((n++))
fi
done
rq=awk 'nr==1{print}' tmp

23.打印提示

cat <<eof
#内容
eof

24. 取用户的根目录

! /bin/bash

while read name pass uid gid gecos home shell
do
echo $home
done < /etc/passwd

25. 查找连续多行，在不连续的行前插入

/bin/bash

lastrow=null
i=0
cat incl|while read line
do
i=expr $i + 1
if echo "$lastrow" | grep "#include <[a-z].h>"
then
if echo "$line" | grep -v "#include <[a-z].h>"
then
sed -i ''$i'i\//all header files are include' incl
i=expr $i + 1
fi
fi
lastrow="$line"
done

26.查询其他数据库其它引擎

/bin/bash

path1=/data/mysql/data/
dbpasswd=db123
#myisam或innodb
engine=innodb

if [ -d $path1 ];then

dir=ls -p $path1 |awk '/\/$/'|awk -f'/' '{print $1}'
for db in $dir
do
number=mysql -uroot -p$dbpasswd -a -s "$path1"mysql.sock -e "use ${db};show table status;" |grep -c $engine
if [ $number -ne 0 ];then
echo "${db}"
fi
done
fi

27.批量修改其他数据库引擎

/bin/bash

for db in test test1 test3
do
tables=mysql -uroot -pdb123 -a -s /data/mysql/data/mysql.sock -e "use $db;show tables;" |awk 'nr != 1{print}'

for table in $tables
do
mysql -uroot -pdb123 -a -s /data/mysql/data/mysql.sock -e "use $db;alter table $table engine=myisam;"
done
done

28.将shell取到的数据插入mysql其他数据库

mysql -u$username -p$passwd -h$dbhost -p$dbport -a -e "
use $dbname;
insert into data values ('','$ip','$date','$time','$data')
"

29.两日期间隔天数

d1=date -d '20070409' +"%s"
d2=date -d '20070304 ' +"%s"
d3=$(($d1 - $d2))
echo $(($d3/60/60/24))

30. ssh批量执行命令

版本1

!/bin/bash

while read line
do
ip=echo $line|awk '{print $1}'
passwd=echo $line|awk '{print $2}'
ssh -n localhost "cat -"
sshpass -p "$passwd" ssh -n -t -o stricthostkeychecking=no root@$ip "id"
done<iplist.txt

版本2

!/bin/bash

iplist=awk '{print $1}' iplist.txt
for ip in $iplist
do
passwd=awk '/'$ip'/{print $2}' iplist.txt
sshpass -p "$passwd" ssh -n -t -o stricthostkeychecking=no root@$ip "id"
done

31.多进程后台并发控制

!/bin/bash

test () {
echo $a
sleep 5
}
for a in seq 1 30
do
test &
echo $!
((num++))
if [ $num -eq 6 ];then
echo "wait..."
wait
num=0
fi
done
wait

32.恢复rm删除的文件

debugfs针对 ext2
ext3grep针对 ext3
extundelete针对 ext4

df -t # 首先查看磁盘分区格式
umount /data/ # 卸载挂载,数据丢失请首先卸载挂载,或重新挂载只读
ext3grep /dev/sdb1 --ls --inode 2 # 记录信息继续查找目录下文件inode信息
ext3grep /dev/sdb1 --ls --inode 131081 # 此处是inode
ext3grep /dev/sdb1 --rest ore-inode 49153 # 记录下inode信息开始恢复目录

this is a failure to select atom!

don't open vim mode

don't open vim-mode

instant vim not installed

it is pity that the vim-instant function can't be

installed correctly!

good night boy!

ace in beijin

参考<http://guoyueheng148.blog.163.com/blog/static/6016709120140209413480/>

0-9 ↩︎

posted @ 2018-04-11 13:05 Focusing 阅读(797) 评论(0) 收藏举报

刷新页面返回顶部

专注

shell常用脚本（转）

1、用shell脚本批量建立Linux用户

!/bin/bash

设置相同的密码

!/bin/bash

2、 编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：

!/bin/bash

3、通过apache访问日志access.log 统计IP和每个地址访问的次数，按访问量列出前10名。

4、一台监控主机，一台被监控主机。被监控主机分区使用率大于80%，就发告警邮件。放到crontab里面，每10分钟执行一次。

！/bin/bash

5、监控主机的磁盘空间,当使用空间超过90％就通过发mail来发警告

!/bin/bash

monitor available disk space

提取本服务器的IP地址信息

6、自动ftp上传

! /bin/bash

7、编写shell脚本，获取本机的网络地址。比如：本机的ip地址是：

！/bin/bash

!/bin/bash

This script print ip and network

8、某系统管理员需要每天做一定的重复工作，编制一个解决方案：

9．设计一个shell程序，添加一个新组为class1，然后添加属于这个组的30个用户，用户名的形式为stdxx，其中xx从01到30

!/bin/sh

10．编写shell程序，实现自动删除50个账号的功能。账号名为stud1至stud50。

!/bin/sh

11．设计一个shell程序，在每月第一天备份并压缩/etc目录的所有内容，存放在/root/bak目录里，且文件名为如下形式yymmdd_etc，yy为年，mm为月，dd为日。Shell程序fileback存放在/usr/bin目录下。

!/bin/sh

12．有一普通用户想在每周日凌晨零点零分定期备份/user/backup到/tmp目录下，该用户应如何做？

13．设计一个Shell程序，在/userdata目录下建立50个目录，即user1～user50，并设置每个目录的权限，其中其他用户的权限为：读；文件所有者的权限为：读、写、执行；文件所有者所在组的权限为：读、执行。

!/bin/sh

chmod 754 /userdata/user$i

chmod 754 /userdata/user$i

13.1 mysql备份实例，自动备份mysql，并删除30天前的备份文件

!/bin/sh

auto backup mysql

wugk 2012-07-14

PATH DEFINE

mysqldump backup mysql

13.2 批量解压tar脚本，批量解压zip并且建立当前目录

!/bin/sh

!/bin/sh

!/bin/sh

13.3

14.从1叠加到100

15.判断参数是否为空-空退出并打印null

!/bin/sh

16.循环数组

17. 判断路径是否存在

18.找出出现次数最多

19. 判断脚本参数是否正确

!/bin/sh

20.打印表格

!/bin/sh

21.判断日期是否合法

!/bin/sh

22.打印日期段所有日期

!/bin/bash

23.打印提示

24. 取用户的根目录

! /bin/bash

25. 查找连续多行，在不连续的行前插入

/bin/bash

26.查询其他数据库 其它引擎

/bin/bash

27.批量修改其他数据库引擎

/bin/bash

28.将shell取到的数据插入mysql其他数据库

29.两日期间隔天数

30. ssh批量执行命令

版本1

!/bin/bash

版本2

!/bin/bash

31.多进程后台并发控制

!/bin/bash

32.恢复rm删除的文件

this is a failure to select atom!

don't open vim mode

don't open vim-mode

2、编写shell脚本，将/usr/local/test目录下大于100k的文件转移到/tmp目录下：

26.查询其他数据库其它引擎