1.find命令
主要用途:主要用来做文件查找。
使用方法:查找文件的方式可以基于:文件名,文件时间属性,文件的所有者和组,文件权限属性,文件类型属性,文件大小,另外可以指定 查找目录的深度,排除指定子目录,具体使用方法:
http://www.cnblogs.com/mchina/archive/2012/07/02/2573313.html
其他:可以通过-exec ,-OK选项对匹配的文件做进一步的处理。-exec选项:对匹配的文件执行该参数所给出的shell命令。相应命令的形式为'command' {} \;,注意{}和\;之间的空格,同时两个{}之间没有空格,-OK: 其主要功能和语法格式与-exec完全相同,唯一的差别是在于该选项更加安全,因为它会在每次执行shell命令之前均予以提示,只有在回答为y的时候, 其后的shell命令才会被继续执行。-exec使用示例,-OK的使用方法类似:
##删除匹配查找的文件
find . -name "*.log" -mtime - -exec rm -f {} \;
常用find命令总结:
#!/bin/bash find . -size +1000000c -print #查长度大于1Mb的文件
find -name april* # 在当前目录下查找以april开始的文件
find /home -mtime - #在/home下查最近两天内改动过的文件
find ./ -mtime - -type f -exec ls -l {} \; # 查询当天修改过的文件
find logs -type f -mtime + -exec -ok rm {} \; #删除查找到得文件
2.xargs命令
主要功能:从输入中构建和执行shell命令。
使用方法:在使用find命令的-exec选项处理匹配到的文件时, find命令将所有匹配到的文件一起传递给exec执行。但有些系统对能够传递给exec的命令长度有限制,这样在find命令运行几分钟之后,就会出现 溢出错误。错误信息通常是“参数列太长”或“参数列溢出”。这就是xargs命令的用处所在,特别是与find命令一起使用。 find命令把匹配到的文件传递给xargs命令,而xargs命令每次只获取一部分文件而不是全部,不像-exec选项那样。这样它可以先处理最先获取的一部分文件,然后是下一批,并如此继续下去。xargs命令使用示例:
##在当面目录下查找所有普通文件,并用grep命令在搜索到的文件中查找hostname这个词
find . -type f -print | xargs grep "hostname" ##直接杀掉mysql的进程
pgrep mysql | xargs kill -
3.sed命令
主要功能:对输入流进行编辑。
基本知识:sed 基本语法-sed [-n] 'editing command', sed工作过程:
- 依次从输入中读取每一行放入到模式空间中;
- 使用 'editing command'对模式空间中的字符串进行处理;
- 输出模式空间中处理后的字符串;
常用选项参数解释:
- -n:不是模式空间的所有处理后的字符串都打印,而是仅仅显示以p指定的行;
- -e:使用多个 editing command时,必须使用这个选项;
- -i:将对模式空间字符串的修改,直接写回到输入中相应的行;
- -f:指定脚本文件。
sed常用command:
- a\ 新增, a 的后面可以接字串,而这些字串会在新的一行出现(目前的下一行)~比如:nl testfile |sed '2a\United States'
- c\ 取代, c 的后面可以接字串,这些字串可以取代 n1,n2 之间的行! 比如:nl testfile |sed '2,5c\No 2-5 number'
- d 删除,因为是删除啊,所以 d 后面通常不接任何咚咚 比如:nl testfile |sed '/west/,/north/d'
- i\ 插入, i 的后面可以接字串,而这些字串会在新的一行出现(目前的上一行) 比如:sed '/eastern/i\NEW ENGLAND REGION' testfile
- p 列印,亦即将某个选择的资料印出。通常 p 会与参数 sed -n 一起运作 比如:nl testfile |sed -n '/south/,/east/p'
- s 取代,可以直接进行取代的工作哩!通常这个 s 的动作可以搭配正规表示法!例如 1,20s/old/new/g 就是啦!比如:nl testfile |sed -n 's/Hemenway/Jones/gp'
sed常用示例:http://www.cnblogs.com/mchina/archive/2012/06/30/2570523.html
4.grep命令
主要功能:文本过滤,自一个或多个文件中过滤出具有某个字符串的行,或是从标准输入过滤出具有某个字符串的行。
grep退出状态:
- 0: 表示成功;
- 1: 表示在所提供的文件无法找到匹配的pattern;
- 2: 表示参数中提供的文件不存在。
grep常用示例:
http://www.cnblogs.com/mchina/archive/2012/06/29/2570187.html
使用grep判断一个文件是否包含指定的模式:
if grep source testfile>/dev/null; then echo match; fi
5.awk命令
主要功能:awk逐行扫描文件的,从第一行到最后一行,寻找匹配特定模板的行,并在这些行上运行“选择”动作。如果一个模板没有指定动作,这些匹配的行就被显示在屏幕上。如果一个动作没有模板,所有被动作指定的行都被处理。与sed相比,awd具有单独把某些列打印出来的功能,sed不具有这种功能,如果想实现需要借助cut。
使用模板:
- awk 'pattern' filename #将匹配模板的行打印出来。
- awk '{action}' filename #对所有的行执行action,然后打印出来。
- awk 'pattern {action}' filename #对匹配pattern的行执行aciton动作。
示例:
- awk -F: '/Tom Jones/{print $1,$2}' employees2 #这里-F选项后面的字符表示分隔符。
- awk -F: '{OFS = "?"}; /Tom/{print $1,$2 }' employees2 #在输出时,域字段间的分隔符已经是?(问号)了
对于awk而言,其模式部分将控制这动作部分的输入,只有符合模式条件的记录才可以交由动作部分基础处理,而模式部分不仅可以写成正则表达式(如上面的例子),awk还支持条件表达式。
- awk '$3 < 4000 {print}' employees #模式使用条件判断语句
在花括号内,用分号分隔的语句称为动作。如果模式在动作前面,模式将决定什么时候发出动作。动作可以是一个语句或是一组语句。语句之间用分号分隔,也可以用换行符,如:
pattern { action statement; action statement; etc. } or
pattern {
action statement
action statement
}
- awk '$3 < 4000 && /Sally/ {print}' employees
- awk '$1 ~ /[Bb]ill/' employees #显示所有第一个域匹配Bill或bill的行。
- awk '$1 !~ /[Bb]ill/' employees #显示所有第一个域不匹配Bill或bill的行,其中!~表示不匹配的意思。
- awk '$3 == "Ann" { $3 = "Christian"; print}' testfile #找到第三个域等于Ann的记录,然后给该域重新赋值为Christian,之后再打印输出该记录。
- awk '/Ann/{$8 += 12; print $8}' testfile #找到包含Ann的记录,并将该条记录的第八个域的值+=12,最后再打印输出。
总结: awk命令包括模式pattern和动作action两个部分,对匹配模式pattern的行执行action动作。模式匹配可以是正则表达式或者是条件表达式,动作部分可以修改域并格式化打印全部或者指定的域。sed+cut完成的功能可以用awk来实现。
详细的awk使用示例:http://www.cnblogs.com/mchina/archive/2012/06/30/2571308.html
6.cut命令
主要功能:剪下文本文件里的数据,文本文件可以是字段类型或是字符类型。
主要选项:
- -c list:以字符为主,执行剪下操作。
- -d delim: 和-f选项配合使用,使用delim作为分隔字段的定界符
- -f list : 以字段为主,作剪下操作。
使用示例:
- ifconfig eth0 | sed -n '2p' | cut -d : -f 2 | cut -d ' ' -f 1 #获取eth0的IP地址,主要是以字段执行剪下操作,输出:192.168.91.188
- ifconfig eth0 | sed -n '2p' | cut -c 21-34 #获取eth0的IP地址,执行以字符为主的剪下操作,输出同上。
7.sort命令
主要功能:排序输入。
主要选项:
- -r:倒置排序的顺序为由大至小。
- -t char:使用单个字符char作为默认的字段分隔字符,取代默认的空白字符。
- -u:只有唯一的记录:丢弃所有具有相同键值的记录,只留其中的第一条。
- -k:定义排序键值字段。
8.tr命令
主要功能:转换字符,比如将大写转换为小写等。
命令语法:tr [ options ] source-char-list replace-char-list
主要选项:
- -c : 将不在source-char-list中的字符依次转换为replace-char-list中的字符, 比如: echo hello | tr -c o v 输出 vvvvov。
- -d:删除source-char-list中的字符。比如:echo hello | tr -d l 输出:heo。
- -s:浓缩重复的字符。 比如:echo hello | tr -s l 输出:helo。
10.read命令
主要功能:将信息读入一个或多个shell变量中。
主要选项:
- -r:读入行时,原始读取,不做任何处理。不将结尾处的反斜杠解释为序行字符。
示例:
- 读取姓名和年龄,并输出:
echo "please input name and age";read name age
echo "name is $name and age is $age"
- 读入passwd文件,并输出user和homedir列:
#!/bin/bash ##IFS定义了将每一行分割成字段的分隔符
while IFS=: read user pass uid gid fullname homedir shell
do
echo "user is $user, and homedir is $homedir"
done < /etc/passwd
- read从管道中读入的例子,复制整个目录树:
#!/bin/bash find /home/xuchao -type d -print | #查找所有的目录
sed 's;/home/xuchao;/home/xuchao/bak;' |
while read newdir ###read从管道中读
do
mkdir $newdir
done
11.locate命令
主要功能:基于数据库的文件查找。locate将文件系统里的所有文件名压缩成数据库,以迅速找到匹配类Shell通配字符模式的文件名,不必实际查找整个庞大的目录结构。 locate *file* 的输出如下。
/home/shell_learn/dos-file
/home/shell_learn/myfile
/home/shell_learn/unix-file
下面介绍两个任务定时命令:
13.at命令
主要功能:让程序在特定的时间执行。at使用示例如下:
at : < command-file #在下午9点执行
at now < command-file #立刻执行
at now + minutes < command-file #10分钟后执行
at tomorrow < command-file #明早上4点执行
at july < command-file #下个国庆日执行(美国)
at noon + minutes < command-file #在今天中午12::15执行
另外atq可以查询当前的定时任务,atrm删除定时任务。
14.crontab命令
主要功能:周期性的在特定时间执行指定的程序。
使用方法:crontab -e 修改定时任务配置文件,定时任务配置文件命令格式如下,前5栏分别用于指定程序的执行时间,依次是:分时年月周, crontab -l 显示当前周期任务。
* * * * * user-name command to be executed
使用示例:
#在 月内, 每天的早上 点到 点中,每隔 分钟执行一次 /usr/bin/backup
*/ - * * /usr/bin/backup