(1)文本处理命令

a.tr 命令

• tr 命令可以用来删除一段文本信息中的某些文字。或者将其进行转换。

  使用方式：

  $ tr [option]...SET1 [SET2]

  常用的选项有：

• 选项 说明
  -d 删除和set1匹配的字符，注意不是全词匹配也不是按字符顺序匹配
  -s 去除set1指定的在输入文本中连续并重复的字符
  

  操作举例：

• 删除 "hello shiyanlou" 中所有的'o','l','h'$ echo 'hello shiyanlou' | tr -d 'olh'
• 将"hello" 中的ll,去重为一个l$ echo 'hello' | tr -s 'l'
• 将输入文本，全部转换为大写或小写输出 `$ cat /etc/passwd | tr '[:lower:]' '[:upper:]

  '[:lower:]' '[:upper:]'你也可以简单的写作'[a-z]' '[A-Z]',当然反过来将大写变小写也是可以的`

b.col 命令

• col 命令可以将Tab换成对等数量的空格建，或反转这个操作。

  使用方式：

  $ col [option]

  常用的选项有：

  -选项 说明
  -x 将Tab转换为空格
  -h 将空格转换为Tab（默认选项）

  操作举例：

• 查看 /etc/protocols 中的不可见字符，可以看到很多 ^I ，这其实就是 Tab 转义成可见字符的符号$ cat -A /etc/protocols
• 使用 col -x 将 /etc/protocols 中的 Tab 转换为空格,然后再使用 cat 查看，你发现 ^I 不见了$ cat /etc/protocols | col -x | cat -A

c.join命令

• 将两个文件中包含相同内容的那一行合并在一起

  使用方式：

  $ join [option]... file1 file2

  常用的选项有：

  -选项 说明
  -t 指定分隔符，默认为空格
  -i 忽略大小写的差异
  -1 指明第一个文件要用哪个字段来对比，，默认对比第一个字段
  -2 指明第二个文件要用哪个字段来对比，，默认对比第一个字段

d.paste命令

paste这个命令与join 命令类似，它是在不对比数据的情况下，简单地将多个文件合并一起，以Tab隔开。

使用方式：

$ paste [option] file...

常用的选项有：-选项 说明 -d 指定合并的分隔符，默认为Tab
-s 不合并到一行，每个文件为一行

操作举例：

$ echo hello > file1$ echo shiyanlou > file2$ echo www.shiyanlou.com > file3$ paste -d ':' file1 file2 file3$ paste -s file1 file2 file3

e.作业

1、#从dos 到unix文本格式转换$ cat -A [dos] | tr -d '^M' | cat -A [dos]-

2、sudo apt-get install ninvaders

10、数据流重定向

(1).简单的重定向

Linux 默认提供了三个特殊设备，用于终端的显示和输出，分别为

• stdin（标准输入,对应于你在终端的输入）

• stdout（标准输出，对应于终端的输出）

• stderr（标准错误输出，对应于终端的输出）

  PS管道默认是连接前一个命令的输出到下一个命令的输入，而重定向通常是需要一个文件来建立两个命令的连接

(2).标准错误重定向

-标准输出和标准错误都被指向伪终端的屏幕显示，所以我们经常看到的一个命令的输出通常是同时包含了标准输出和标准错误的结果的。

隐藏某些错误或者警告

# 将标准错误重定向到标准输出，再将标准输出重定向到文件，注意要将重定向到文件写到前面$ cat Documents/test.c\~ hello.c >somefile 2>&1# 或者只用bash提供的特殊的重定向符号"&"将标准错误和标准输出同时重定向到文件$ cat Documents/test.c\~ hello.c &>somefilehell

(4).使用tee命令同时重定向到多个文件

-除了将需要将输出重定向到文件之外也需要将信息打印在终端$ echo 'hello shiyanlou' | tee hello

(5).永久重定向

-使用exec命令实现“永久”重定向# 先开启一个子 Shell$ zsh# 使用exec替换当前进程的重定向，将标准输出重定向到一个文件$ exec 1>somefile# 后面你执行的命令的输出都将被重定向到文件中,直到你退出当前子shell，或取消exec的重定向（后面将告诉你怎么做）$ ls$ exit$ cat somefile

(6).创建输出文件描述符

-默认在 Shell 中可以有9个打开的文件描述符，上面我们使用了也是它默认提供的0,1,2号文件描述符

使用exec命令可以创建新的文件描述符：

$ zsh$ exec 3>somefile# 先进入目录，再查看，否则你可能不能得到正确的结果，然后再回到上一次的目录$ cd /dev/fd/;ls -Al;cd -# 注意下面的命令>与&之间不应该有空格，如果有空格则会出错$ echo "this is test" >&3$ cat somefile$ exit

(7).关闭文件描述符

-如上面我们打开的3号文件描述符，可以使用如下操作将它关闭：$ exec 3>&-$ cd /dev/fd;ls -Al;cd -

(8).完全屏蔽命令的输出

-在 Linux 中有一个被成为“黑洞”的设备文件,所以导入它的数据都将被“吞噬”。/dev/null，或称空设备，是一个特殊的设备文件，它通常被用于丢弃不需要的输出流，或作为用于输入流的空文件，这些操作通常由重定向完成。读取它则会立即得到一个EOF。

我们可以利用设个/dev/null屏蔽命令的输出：

$ cat Documents/test.c\~ nefile 1>/dev/null 2>&1

(9).使用 xargs 分割参数列表

-xargs 是一条 UNIX 和类 UNIX 操作系统的常用命令。它的作用是将参数列表转换成小块分段传递给其他命令，以避免参数列表过长的问题。 这个命令在有些时候十分有用，特别是当用来处理产生大量输出结果的命令如 find，locate 和 grep 的结果，详细用法请参看 man 文档。$ cut -d: -f1 < /etc/passwd | sort | xargs echo

(10).作业

$ sudo apt-get install caca-utils$ cacaview <pic_file>$ cacademo$ cacafire

11.数据流重定向

(1)简单的重定向

Linux 默认提供了三个特殊设备，用于终端的显示和输出，分别为

• stdin（标准输入,对应于你在终端的输入）

• stdout（标准输出，对应于终端的输出）

• stderr（标准错误输出，对应于终端的输出）

  PS管道默认是连接前一个命令的输出到下一个命令的输入，而重定向通常是需要一个文件来建立两个命令的连接

(2)标准错误重定向

-标准输出和标准错误都被指向伪终端的屏幕显示，所以我们经常看到的一个命令的输出通常是同时包含了标准输出和标准错误的结果的。

隐藏某些错误或者警告

# 将标准错误重定向到标准输出，再将标准输出重定向到文件，注意要将重定向到文件写到前面$ cat Documents/test.c\~ hello.c >somefile 2>&1# 或者只用bash提供的特殊的重定向符号"&"将标准错误和标准输出同时重定向到文件$ cat Documents/test.c\~ hello.c &>somefilehell

(3)使用tee命令同时重定向到多个文件

-除了将需要将输出重定向到文件之外也需要将信息打印在终端$ echo 'hello shiyanlou' | tee hello

(4)永久重定向

-使用exec命令实现“永久”重定向(效果见附图)# 先开启一个子 Shell$ zsh# 使用exec替换当前进程的重定向，将标准输出重定向到一个文件$ exec 1>somefile# 后面你执行的命令的输出都将被重定向到文件中,直到你退出当前子shell，或取消exec的重定向（后面将告诉你怎么做）$ ls$ exit$ cat somefile

(5)创建输出文件描述符

-默认在 Shell 中可以有9个打开的文件描述符，上面我们使用了也是它默认提供的0,1,2号文件描述符

使用exec命令可以创建新的文件描述符：

$ zsh$ exec 3>somefile# 先进入目录，再查看，否则你可能不能得到正确的结果，然后再回到上一次的目录$ cd /dev/fd/;ls -Al;cd -# 注意下面的命令>与&之间不应该有空格，如果有空格则会出错$ echo "this is test" >&3$ cat somefile$ exit

(6)关闭文件描述符

-如上面我们打开的3号文件描述符，可以使用如下操作将它关闭：$ exec 3>&-$ cd /dev/fd;ls -Al;cd -

(7)完全屏蔽命令的输出

-在 Linux 中有一个被成为“黑洞”的设备文件,所以导入它的数据都将被“吞噬”。/dev/null，或称空设备，是一个特殊的设备文件，它通常被用于丢弃不需要的输出流，或作为用于输入流的空文件，这些操作通常由重定向完成。读取它则会立即得到一个EOF。

我们可以利用设个/dev/null屏蔽命令的输出：

$ cat Documents/test.c\~ nefile 1>/dev/null 2>&1

(8)使用 xargs 分割参数列表

-xargs 是一条 UNIX 和类 UNIX 操作系统的常用命令。它的作用是将参数列表转换成小块分段传递给其他命令，以避免参数列表过长的问题。 这个命令在有些时候十分有用，特别是当用来处理产生大量输出结果的命令如 find，locate 和 grep 的结果，详细用法请参看 man 文档。$ cut -d: -f1 < /etc/passwd | sort | xargs echo

(9)作业

$ sudo apt-get install caca-utils$ cacaview <pic_file>$ cacademo$ cacafire

12.数据流重定向

（1）简单的重定向

Linux 默认提供了三个特殊设备，用于终端的显示和输出，分别为

• stdin（标准输入,对应于你在终端的输入）

• stdout（标准输出，对应于终端的输出）

• stderr（标准错误输出，对应于终端的输出）

  PS管道默认是连接前一个命令的输出到下一个命令的输入，而重定向通常是需要一个文件来建立两个命令的连接

（2）标准错误重定向

-标准输出和标准错误都被指向伪终端的屏幕显示，所以我们经常看到的一个命令的输出通常是同时包含了标准输出和标准错误的结果的。

隐藏某些错误或者警告

# 将标准错误重定向到标准输出，再将标准输出重定向到文件，注意要将重定向到文件写到前面$ cat Documents/test.c\~ hello.c >somefile 2>&1# 或者只用bash提供的特殊的重定向符号"&"将标准错误和标准输出同时重定向到文件$ cat Documents/test.c\~ hello.c &>somefilehell

（3）使用tee命令同时重定向到多个文件

-除了将需要将输出重定向到文件之外也需要将信息打印在终端$ echo 'hello shiyanlou' | tee hello

（4）永久重定向

-使用exec命令实现“永久”重定向(效果见附图)# 先开启一个子 Shell$ zsh# 使用exec替换当前进程的重定向，将标准输出重定向到一个文件$ exec 1>somefile# 后面你执行的命令的输出都将被重定向到文件中,直到你退出当前子shell，或取消exec的重定向（后面将告诉你怎么做）$ ls$ exit$ cat somefile

（5）创建输出文件描述符

-默认在 Shell 中可以有9个打开的文件描述符，上面我们使用了也是它默认提供的0,1,2号文件描述符

使用exec命令可以创建新的文件描述符：

$ zsh$ exec 3>somefile# 先进入目录，再查看，否则你可能不能得到正确的结果，然后再回到上一次的目录

$ cd /dev/fd/;ls -Al;cd -# 注意下面的命令>与&之间不应该有空格，如果有空格则会出错

$ echo "this is test" >&3$ cat somefile$ exit

（6）关闭文件描述符

-如上面我们打开的3号文件描述符，可以使用如下操作将它关闭：$ exec 3>&-$ cd /dev/fd;ls -Al;cd -

（7）完全屏蔽命令的输出

-在 Linux 中有一个被成为“黑洞”的设备文件,所以导入它的数据都将被“吞噬”。/dev/null，或称空设备，是一个特殊的设备文件，它通常被用于丢弃不需要的输出流，或作为用于输入流的空文件，这些操作通常由重定向完成。读取它则会立即得到一个EOF。

我们可以利用设个/dev/null屏蔽命令的输出：

$ cat Documents/test.c\~ nefile 1>/dev/null 2>&1

（8）使用 xargs 分割参数列表

-xargs 是一条 UNIX 和类 UNIX 操作系统的常用命令。它的作用是将参数列表转换成小块分段传递给其他命令，以避免参数列表过长的问题。 这个命令在有些时候十分有用，特别是当用来处理产生大量输出结果的命令如 find，locate 和 grep 的结果，详细用法请参看 man 文档。$ cut -d: -f1 < /etc/passwd | sort | xargs echo

（9）作业

$ sudo apt-get install caca-utils

$ cacaview <pic_file>

$ cacademo$ cacafire