shell学习之常用命令总结

1.find命令

  主要用途:主要用来做文件查找。

  使用方法:查找文件的方式可以基于:文件名,文件时间属性,文件的所有者和组,文件权限属性,文件类型属性,文件大小,另外可以指定 查找目录的深度,排除指定子目录,具体使用方法:

  http://www.cnblogs.com/mchina/archive/2012/07/02/2573313.html

  其他:可以通过-exec ,-OK选项对匹配的文件做进一步的处理。-exec选项:对匹配的文件执行该参数所给出的shell命令。相应命令的形式为'command' {} \;,注意{}和\;之间的空格,同时两个{}之间没有空格,-OK: 其主要功能和语法格式与-exec完全相同,唯一的差别是在于该选项更加安全,因为它会在每次执行shell命令之前均予以提示,只有在回答为y的时候, 其后的shell命令才会被继续执行。-exec使用示例,-OK的使用方法类似:

##删除匹配查找的文件
find . -name "*.log" -mtime - -exec rm -f {} \;

  常用find命令总结:

#!/bin/bash

find   .   -size   +1000000c   -print        #查长度大于1Mb的文件
find   -name april*                     # 在当前目录下查找以april开始的文件
find   /home   -mtime   -                 #在/home下查最近两天内改动过的文件
find   ./   -mtime   -   -type f   -exec   ls -l   {} \; # 查询当天修改过的文件
find logs -type f -mtime + -exec   -ok   rm {} \; #删除查找到得文件

2.xargs命令

  主要功能:从输入中构建和执行shell命令

  使用方法:在使用find命令的-exec选项处理匹配到的文件时, find命令将所有匹配到的文件一起传递给exec执行。但有些系统对能够传递给exec的命令长度有限制,这样在find命令运行几分钟之后,就会出现 溢出错误。错误信息通常是“参数列太长”或“参数列溢出”。这就是xargs命令的用处所在,特别是与find命令一起使用。  find命令把匹配到的文件传递给xargs命令,而xargs命令每次只获取一部分文件而不是全部,不像-exec选项那样。这样它可以先处理最先获取的一部分文件,然后是下一批,并如此继续下去。xargs命令使用示例:

##在当面目录下查找所有普通文件,并用grep命令在搜索到的文件中查找hostname这个词
find . -type f -print | xargs grep "hostname" ##直接杀掉mysql的进程
pgrep mysql | xargs kill -  

3.sed命令
  主要功能:对输入流进行编辑。
  基本知识:sed 基本语法-sed [-n] 'editing command', sed工作过程:

  • 依次从输入中读取每一行放入到模式空间中;
  • 使用 'editing command'对模式空间中的字符串进行处理;
  • 输出模式空间中处理后的字符串;

  常用选项参数解释

  • -n:不是模式空间的所有处理后的字符串都打印,而是仅仅显示以p指定的行;
  • -e:使用多个 editing command时,必须使用这个选项;
  • -i:将对模式空间字符串的修改,直接写回到输入中相应的行;
  • -f:指定脚本文件。

  sed常用command:

  • a\  新增, a 的后面可以接字串,而这些字串会在新的一行出现(目前的下一行)~比如:nl testfile |sed '2a\United States'
  • c\  取代, c 的后面可以接字串,这些字串可以取代 n1,n2 之间的行! 比如:nl testfile |sed '2,5c\No 2-5 number'
  • d  删除,因为是删除啊,所以 d 后面通常不接任何咚咚                      比如:nl testfile |sed '/west/,/north/d'
  • i\  插入, i 的后面可以接字串,而这些字串会在新的一行出现(目前的上一行) 比如:sed '/eastern/i\NEW ENGLAND REGION' testfile
  • p  列印,亦即将某个选择的资料印出。通常 p 会与参数 sed -n 一起运作   比如:nl testfile |sed -n '/south/,/east/p'
  • s  取代,可以直接进行取代的工作哩!通常这个 s 的动作可以搭配正规表示法!例如 1,20s/old/new/g 就是啦!比如:nl testfile |sed -n 's/Hemenway/Jones/gp'

  sed常用示例:http://www.cnblogs.com/mchina/archive/2012/06/30/2570523.html 

4.grep命令

  主要功能:文本过滤,自一个或多个文件中过滤出具有某个字符串的行,或是从标准输入过滤出具有某个字符串的行。

  grep退出状态:

  • 0: 表示成功;
  • 1: 表示在所提供的文件无法找到匹配的pattern;
  • 2: 表示参数中提供的文件不存在。

  grep常用示例:

  http://www.cnblogs.com/mchina/archive/2012/06/29/2570187.html

  使用grep判断一个文件是否包含指定的模式:

 if grep source testfile>/dev/null; then echo match; fi

5.awk命令

  主要功能:awk逐行扫描文件的,从第一行到最后一行,寻找匹配特定模板的行,并在这些行上运行“选择”动作。如果一个模板没有指定动作,这些匹配的行就被显示在屏幕上。如果一个动作没有模板,所有被动作指定的行都被处理。与sed相比,awd具有单独把某些列打印出来的功能,sed不具有这种功能,如果想实现需要借助cut

  使用模板:

  • awk 'pattern' filename   #将匹配模板的行打印出来。
  • awk '{action}' filename #对所有的行执行action,然后打印出来。
  • awk 'pattern {action}' filename #对匹配pattern的行执行aciton动作。

  示例:

  • awk -F: '/Tom Jones/{print $1,$2}' employees2  #这里-F选项后面的字符表示分隔符。
  • awk -F: '{OFS = "?"};  /Tom/{print $1,$2 }' employees2 #在输出时,域字段间的分隔符已经是?(问号)了

对于awk而言,其模式部分将控制这动作部分的输入,只有符合模式条件的记录才可以交由动作部分基础处理,而模式部分不仅可以写成正则表达式(如上面的例子),awk还支持条件表达式。

  • awk '$3 < 4000 {print}' employees  #模式使用条件判断语句

在花括号内,用分号分隔的语句称为动作。如果模式在动作前面,模式将决定什么时候发出动作。动作可以是一个语句或是一组语句。语句之间用分号分隔,也可以用换行符,如:
    pattern { action statement; action statement; etc. } or
    pattern {
        action statement
        action statement
    }

  • awk '$3 < 4000 && /Sally/ {print}' employees
  • awk '$1 ~ /[Bb]ill/' employees      #显示所有第一个域匹配Bill或bill的行。
  • awk '$1 !~ /[Bb]ill/' employees     #显示所有第一个域不匹配Bill或bill的行,其中!~表示不匹配的意思。
  •  awk '$3 == "Ann" { $3 = "Christian"; print}' testfile #找到第三个域等于Ann的记录,然后给该域重新赋值为Christian,之后再打印输出该记录。
  •  awk '/Ann/{$8 += 12; print $8}' testfile #找到包含Ann的记录,并将该条记录的第八个域的值+=12,最后再打印输出。

   总结: awk命令包括模式pattern和动作action两个部分,对匹配模式pattern的行执行action动作。模式匹配可以是正则表达式或者是条件表达式,动作部分可以修改域并格式化打印全部或者指定的域。sed+cut完成的功能可以用awk来实现。

  详细的awk使用示例http://www.cnblogs.com/mchina/archive/2012/06/30/2571308.html

6.cut命令

  主要功能:剪下文本文件里的数据,文本文件可以是字段类型或是字符类型。

  主要选项:

  • -c list:以字符为主,执行剪下操作。
  • -d delim: 和-f选项配合使用,使用delim作为分隔字段的定界符
  • -f list : 以字段为主,作剪下操作。

  使用示例:

  • ifconfig eth0 | sed -n '2p' | cut -d : -f 2 | cut -d ' ' -f 1 #获取eth0的IP地址,主要是以字段执行剪下操作,输出:192.168.91.188
  • ifconfig eth0 | sed -n '2p' | cut -c 21-34 #获取eth0的IP地址,执行以字符为主的剪下操作,输出同上。

7.sort命令

   主要功能:排序输入。

  主要选项:

  • -r:倒置排序的顺序为由大至小。
  • -t char:使用单个字符char作为默认的字段分隔字符,取代默认的空白字符。
  • -u:只有唯一的记录:丢弃所有具有相同键值的记录,只留其中的第一条。
  • -k:定义排序键值字段。

8.tr命令

   主要功能:转换字符,比如将大写转换为小写等。

  命令语法:tr [ options ] source-char-list replace-char-list

  主要选项:

  • -c : 将不在source-char-list中的字符依次转换为replace-char-list中的字符, 比如: echo hello | tr -c o v 输出 vvvvov。
  • -d:删除source-char-list中的字符。比如:echo hello | tr -d l 输出:heo。
  • -s:浓缩重复的字符。 比如:echo hello | tr -s l 输出:helo。

10.read命令

  主要功能:将信息读入一个或多个shell变量中。

  主要选项:

  • -r:读入行时,原始读取,不做任何处理。不将结尾处的反斜杠解释为序行字符。

  示例:

  • 读取姓名和年龄,并输出:
echo "please input name and age";read name age
echo "name is $name and age is $age"
  • 读入passwd文件,并输出user和homedir列:
#!/bin/bash

##IFS定义了将每一行分割成字段的分隔符
while IFS=: read user pass uid gid fullname homedir shell
do
echo "user is $user, and homedir is $homedir"
done < /etc/passwd
  • read从管道中读入的例子,复制整个目录树:
#!/bin/bash

find /home/xuchao -type d -print | #查找所有的目录
sed 's;/home/xuchao;/home/xuchao/bak;' |
while read newdir ###read从管道中读
do
mkdir $newdir
done

11.locate命令

  主要功能:基于数据库的文件查找。locate将文件系统里的所有文件名压缩成数据库,以迅速找到匹配类Shell通配字符模式的文件名,不必实际查找整个庞大的目录结构。 locate *file* 的输出如下。

/home/shell_learn/dos-file
/home/shell_learn/myfile
/home/shell_learn/unix-file

下面介绍两个任务定时命令:

13.at命令

  主要功能:让程序在特定的时间执行。at使用示例如下:

at : < command-file #在下午9点执行
at now < command-file #立刻执行
at now + minutes < command-file #10分钟后执行
at tomorrow < command-file #明早上4点执行
at july < command-file #下个国庆日执行(美国)
at noon + minutes < command-file #在今天中午12::15执行

另外atq可以查询当前的定时任务,atrm删除定时任务。

14.crontab命令

  主要功能:周期性的在特定时间执行指定的程序。
  使用方法:crontab -e 修改定时任务配置文件,定时任务配置文件命令格式如下,前5栏分别用于指定程序的执行时间,依次是:分时年月周, crontab -l 显示当前周期任务。

*  *  *  *  * user-name command to be executed

  使用示例:

#在  月内, 每天的早上  点到  点中,每隔  分钟执行一次 /usr/bin/backup
*/ - * * /usr/bin/backup

 

  

上一篇:跟我一起读postgresql源码(六)——Executor(查询执行模块之——查询执行策略)


下一篇:liferay 指定默认首页