shell基础十二篇

时间：2006-06-28 22:06:04 来源：作者：

Ａ硪恢痔婊环椒ㄊ鞘褂昧礁� -e 选项来指定两个不同的命令：

 $ sed -n -e '=' -e 'p' myfile.txt

然而，在使用更为复杂的附加和插入命令时，甚至多个 '-e' 选项也不能帮我们的忙。对于复杂的多行脚本，最好的方法是将命令放入一个单独的文件中。然后，用 -f 选项引用该脚本文件：

 $ sed -n -f mycommands.sed myfile.txt

这种方法虽然可能不太方便，但总是管用。

一个地址的多个命令
有时，可能要指定应用到一个地址的多个命令。这在执行许多 's///' 以变换源文件中的字和语法时特别方便。要对一个地址执行多个命令，可在文件中输入 sed 命令，然后使用 '{ }' 字符将这些命令分组，如下所示：

 1,20{ 	s/[Ll]inux/GNU/Linux/g 	s/samba/Samba/g 	s/posix/POSIX/g }

上例将把三个替换命令应用到第 1 行到第 20 行（包括这两行）。还可以使用规则表达式地址或者二者的组合：

 1,/^END/{         s/[Ll]inux/GNU/Linux/g         s/samba/Samba/g         s/posix/POSIX/g 	p }

该例将把 '{ }' 之间的所有命令应用到从第 1 行开始，到以字母 "END" 开始的行结束（如果在源文件中没发现 "END"，则到文件结束）的所有行。

附加、插入和更改行
既然在单独的文件中编写 sed 脚本，我们可以利用附加、插入和更改行命令。这些命令将在当前行之后插入一行，在当前行之前插入一行，或者替换模式空间中的当前行。它们也可以用来将多行插入到输出。插入行命令用法如下：

 i This line will be inserted before each line

如果不为该命令指定地址，那么它将应用到每一行，并产生如下的输出：

 This line will be inserted before each line line 1 here 
KYKLinux联盟
 This line will be inserted before each line line 2 here 
KYKLinux联盟
 This line will be inserted before each line line 3 here 
KYKLinux联盟
 This line will be inserted before each line line 4 here

如果要在当前行之前插入多行，可以通过在前一行之后附加一个反斜杠来添加附加行，如下所示：

 i insert this line and this one and this one and, uh, this one too.

附加命令的用法与之类似，但是它将把一行或多行插入到模式空间中的当前行之后。其用法如下：

 a insert this line after each line.  Thanks! :)

另一方面，“更改行”命令将实际替换模式空间中的当前行，其用法如下：

 c You're history, original line! Muhahaha!

因为附加、插入和更改行命令需要在多行输入，所以将把它们输入到一个文本 sed 脚本中，然后通过使用 '-f' 选项告诉 sed 执行它们。使用其它方法将命令传递给 sed 会出现问题。

文本转换 KYKLinux联盟
第一个实际脚本将 UNIX 风格的文本转换成 DOS/Windows 格式。您可能知道，基于 DOS/Windows 的文本文件在每一行末尾有一个 CR（回车）和 LF（换行），而 UNIX 文本只有一个换行。有时可能需要将某些 UNIX 文本移至 Windows 系统，该脚本将为您执行必需的格式转换。 KYKLinux联盟
KYKLinux联盟
 $ sed -e 's/$/r/' myunix.txt > mydos.txt  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
在该脚本中，'$' 规则表达式将与行的末尾匹配，而 'r' 告诉 sed 在其之前插入一个回车。在换行之前插入回车，立即，每一行就以 CR/LF 结束。请注意，仅当使用 GNU sed 3.02.80 或以后的版本时，才会用 CR 替换 'r'。如果还没有安装 GNU sed 3.02.80，请在我的第一篇 sed 文章中查看如何这样做的说明。 KYKLinux联盟
KYKLinux联盟
我已记不清有多少次在下载一些示例脚本或 C 代码之后，却发现它是 DOS/Windows 格式。虽然很多程序不在乎 DOS/Windows 格式的 CR/LF 文本文件，但是有几个程序却在乎 -- 最著名的是 bash，只要一遇到回车，它就会出问题。以下 sed 调用将把 DOS/Windows 格式的文本转换成可信赖的 UNIX 格式： KYKLinux联盟
KYKLinux联盟
 $ sed -e 's/.$//' mydos.txt > myunix.txt  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
该脚本的工作原理很简单：替代规则表达式与一行的最末字符匹配，而该字符恰好就是回车。我们用空字符替换它，从而将其从输出中彻底删除。如果使用该脚本并注意到已经删除了输出中每行的最末字符，那么，您就指定了已经是 UNIX 格式的文本文件。也就没必要那样做了！ KYKLinux联盟
KYKLinux联盟
反转行 KYKLinux联盟
下面是另一个方便的小脚本。与大多数 Linux 发行版中包括的 "tac" 命令一样，该脚本将反转文件中行的次序。"tac" 这个名称可能会给人以误导，因为 "tac" 不反转行中字符的位置（左和右），而是反转文件中行的位置（上和下）。用 "tac" 处理以下文件： KYKLinux联盟
KYKLinux联盟
 foo bar oni  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
....将产生以下输出： KYKLinux联盟
KYKLinux联盟
 oni bar foo  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
可以用以下 sed 脚本达到相同目的：  KYKLinux联盟
KYKLinux联盟
 $ sed -e '1!G;h;$!d' forward.txt > backward.txt  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
如果登录到恰巧没有 "tac" 命令的 FreeBSD 系统，将发现该 sed 脚本很有用。虽然方便，但最好还是知道该脚本为什么那样做。让我们对它进行讨论。 KYKLinux联盟
KYKLinux联盟
反转解释 KYKLinux联盟
首先，该脚本包含三个由分号隔开的单独 sed 命令：'1!G'、'h' 和 '$!d'。现在，需要好好理解用于第一个和第三个命令的地址。如果第一个命令是 '1G'，则 'G' 命令将只应用第一行。然而，还有一个 '!' 字符 -- 该 '!' 字符忽略该地址，即，'G' 命令将应用到除第一行之外的所有行。'$!d' 命令与之类似。如果命令是 '$d'，则将只把 'd' 命令应用到文件中的最后一行（'$' 地址是指定最后一行的简单方式）。然而，有了 '!' 之后，'$!d' 将把 'd' 命令应用到除最后一行之外的所有行。现在，我们所要理解的是这些命令本身做什么。 KYKLinux联盟
KYKLinux联盟
当对上面的文本文件执行反转脚本时，首先执行的命令是 'h'。该命令告诉 sed 将模式空间（保存正在处理的当前行的缓冲区）的内容复制到保留空间（临时缓冲区）。然后，执行 'd' 命令，该命令从模式空间中删除 "foo"，以便在对这一行执行完所有命令之后不打印它。 KYKLinux联盟
KYKLinux联盟
现在，第二行。在将 "bar" 读入模式空间之后，执行 'G' 命令，该命令将保留空间的内容 ("foon") 附加到模式空间 ("barn")，使模式空间的内容为 "barnfoon"。'h' 命令将该内容放回保留空间保护起来，然后，'d' 从模式空间删除该行，以便不打印它。 KYKLinux联盟
KYKLinux联盟
对于最后的 "oni" 行，除了不删除模式空间的内容（由于 'd' 之前的 '$!'）以及将模式空间的内容（三行）打印到标准输出之外，重复同样的步骤。 KYKLinux联盟
KYKLinux联盟
现在，要用 sed 执行一些强大的数据转换。 KYKLinux联盟
KYKLinux联盟
sed QIF 魔法 KYKLinux联盟
过去几个星期，我一直想买一份 Quicken 来结算我的银行帐户。Quicken 是一个非常好的金融程序，当然会成功地完成这项工作。但是，经过考虑之后，我觉得自己可以轻易编写某个软件来结算我的支票簿。我想，毕竟，我是个软件开发人员！ KYKLinux联盟
KYKLinux联盟
我开发了一个很好的小型支票簿结算程序（使用 awk），它通过分析包含我的所有交易的文本文件的语法来计算余额。略微调整之后，我将其改进，以便可以象 Quicken 那样跟踪不同的贷款和借款类别。但是，我还要添加一个特性。最近，我将帐户转移到一家有联机 Web 帐户界面的银行。有一天，我注意到，这家银行的 Web 站点允许以 Quicken 的 .QIF 格式下载我的帐户信息。我马上觉得，如果可以将该信息转换成文本格式，那就太棒了。 KYKLinux联盟
KYKLinux联盟
两种格式的故事 KYKLinux联盟
在查看 QIF 格式之前，先看一下我的 checkbook.txt 格式： KYKLinux联盟
KYKLinux联盟
 28 Aug 2000     food    -       -       Y     Supermarket             30.94 25 Aug 2000     watr    -       103     Y     Check 103               52.86  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
在我的文件中，所有字段都由一个或多个制表符分开，每个交易占据一行。日期之后的下一个字段列出支出类型（如果是收入项，则为 "-"）。第三个字段列出收入类型（如果是支出项，则为 "-"）。然后，是一个支票号字段（如果为空，则还是 "-"），一个交易完成字段（"Y" 或 "N"），一个注释和一个美元金额字段。现在，让我们看一下 QIF 格式。当用文本查看器查看下载的 QIF 文件时，它看起来如下： KYKLinux联盟
KYKLinux联盟
 !Type:Bank D08/28/2000 T-8.15 N PCHECKCARD SUPERMARKET ^ D08/28/2000 T-8.25 N PCHECKCARD PUNJAB RESTAURANT ^ D08/28/2000 T-17.17 N PCHECKCARD SUPERMARKET  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
浏览过文件之后，不难猜出其格式 -- 忽略第一行，其余的格式如下：  KYKLinux联盟
KYKLinux联盟
 D<数据>   KYKLinux联盟
T<交易量>   KYKLinux联盟
N<支票号>   KYKLinux联盟
P<描述>   KYKLinux联盟
^   （这是字段分隔符）  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
开始处理 KYKLinux联盟
在处理象这样重要的 sed 项目时，不要气馁 -- sed 允许您将数据逐渐修改成最终形式。在进行当中，可以继续细化 sed 脚本，直到输出与预期的完全一样为止。无需在试第一次时就保证其完全正确。 KYKLinux联盟
KYKLinux联盟
要开始，首先创建一个名为 "qiftrans.sed" 的文件，然后开始修改数据：  KYKLinux联盟
KYKLinux联盟
 1d /^^/d s/[[]]//g  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
第一个 '1d' 命令删除第一行，第二个命令从输出除去那些讨厌的 '^' 字符。最后一行除去文件中可能存在的任何控制字符。既然在处理外来文件格式，我想消除在中途遇到任何控制字符的风险。到目前为止，一切顺利。现在，要向该基本脚本中添加一些处理功能： KYKLinux联盟
KYKLinux联盟
 1d /^^/d s/[[]]//g /^D/ {  KYKLinux联盟
 s/^D(.*)/1tOUTYtINNYt/  KYKLinux联盟
 s/^01/Jan/         s/^02/Feb/ KYKLinux联盟
 s/^03/Mar/         s/^04/Apr/ KYKLinux联盟
 s/^05/May/         s/^06/Jun/  KYKLinux联盟
 s/^07/Jul/         s/^08/Aug/  KYKLinux联盟
 s/^09/Sep/         s/^10/Oct/ KYKLinux联盟
 s/^11/Nov/         s/^12/Dec/  KYKLinux联盟
 s:^(.*)/(.*)/(.*):2 1 3:  }  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
首先，添加一个 '/^D/' 地址，以便 sed 只在遇到 QIF 数据字段的第一个字符 'D' 时才开始处理。当 sed 将这样一行读入其模式空间时，将按顺序执行花括号中的所有命令。 KYKLinux联盟
KYKLinux联盟
花括号中的第一个命令将把如下行： KYKLinux联盟
KYKLinux联盟
 D08/28/2000  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
变换成：  KYKLinux联盟
KYKLinux联盟
 08/28/2000 OUTY INNY  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
当然，现在的格式还不完美，但没关系。我们将在进行过程中逐渐细化模式空间的内容。后面 12 行的最后效果是将数据变换成三个字母的格式，最后一行从数据中除去三个斜杠。最后得到这一行： KYKLinux联盟
KYKLinux联盟
 Aug 28 2000 OUTY INNY  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
OUTY 和 INNY 字段是占位符，以后将被替换。现在还不能确定它们，因为如果美元金额为负，将把 OUTY 和 INNY 设置成 "misc" 和 "-"，但是，如果美元金额为正，将分别把它们更改成 "-" 和 "inco"。既然还没有读入美元金额，所以，需要暂时使用占位符。 KYKLinux联盟
KYKLinux联盟
细化 KYKLinux联盟
现在进一步细化：  KYKLinux联盟
KYKLinux联盟
 1d  /^^/d s/[[]]//g  /^D/ { KYKLinux联盟
 s/^D(.*)/1tOUTYtINNYt/  KYKLinux联盟
 s/^01/Jan/          s/^02/Feb/ KYKLinux联盟
         s/^03/Mar/          s/^04/Apr/ KYKLinux联盟
 s/^05/May/          s/^06/Jun/ KYKLinux联盟
 s/^07/Jul/          s/^08/Aug/ KYKLinux联盟
 s/^09/Sep/          s/^10/Oct/ KYKLinux联盟
 s/^11/Nov/          s/^12/Dec/ KYKLinux联盟
 s:^(.*)/(.*)/(.*):2 1 3: KYKLinux联盟
 N          N          N           KYKLinux联盟
 s/nT(.*)nN(.*)nP(.*)/NUM2NUMttYtt3tAMT1AMT/ KYKLinux联盟
 s/NUMNUM/-/          s/NUM([0-9]*)NUM/1/ KYKLinux联盟
 s/([0-9]),/1/  }  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
后七行有些复杂，所以将详细讨论它们。首先，连续使用三个 'N' 命令。'N' 命令告诉 sed 将下一行读入输入中，然后将其附加到当前模式空间。这三个 'N' 命令导致将下三行附加到当前模式空间缓冲区，现在这一行看起来如下： KYKLinux联盟
KYKLinux联盟
 28 Aug 2000 OUTY INNY nT-8.15nNnPCHECKCARD SUPERMARKET  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
sed 的模式空间变得很难看 -- 需要除去额外的新行，并执行某些附加的格式化。要这样做，将使用替代命令。要匹配的模式为： KYKLinux联盟
KYKLinux联盟
 'nT.*nN.*nP.*'  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
这将与后面依次跟有 'T'、零或多个字符、新行、'N'、任何数量的字符、新行、'P'、以及任何数量字符的新行匹配。呀！这个规则表达式将与刚刚附加到模式空间的三行的全部内容匹配。但我们要重新格式化该区域，而不是整个替换它。美元金额、支票号（如果有的话）和描述需要出现在替换字符串中。要这样做，我们用带有反斜杠的圆括号括起那些“感兴趣部分”，以便可以在替换字符串中引用它们（使用 '1'、'2 和 '3' 来告诉 sed 将它们插入到何处）。以下是最后的命令： KYKLinux联盟
KYKLinux联盟
 s/nT(.*)nN(.*)nP(.*)/NUM2NUMttYtt3tAMT1AMT/   KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
该命令将我们的行变换成：  KYKLinux联盟
KYKLinux联盟
  28 Aug 2000  OUTY  INNY  NUMNUM    Y    CHECKCARD SUPERMARKET  AMT-8.15AMT  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
虽然该行正变得好一些，但是，有几件事一看就有点...啊...有趣。首先是那个愚蠢的 "NUMNUM" 字符串 -- 其目的何在？如果查看 sed 脚本的后两行，就会发现其目的，后两行将把 "NUMNUM" 替换成 "-"，而把 "NUM"<number>"NUM" 替换成 <number>。如您所见，用愚蠢的标记括起支票号允许我们在该字段为空时方便地插入一个 "-"。 KYKLinux联盟
KYKLinux联盟
结束尝试 KYKLinux联盟
最后一行除去数字后的逗号。它把如 "3,231.00" 这样的美元金额转换成我使用的格式 "3231.00"。现在，让我们看一下最终脚本： KYKLinux联盟
KYKLinux联盟
最终的“QIF 到文本”脚本  1d /^^/d s/[[]]//g /^D/ {  s/^D(.*)/1tOUTYtINNYt/  KYKLinux联盟
 s/^01/Jan/  s/^02/Feb/  s/^03/Mar/  s/^04/Apr/  s/^05/May/  KYKLinux联盟
 s/^06/Jun/  s/^07/Jul/  s/^08/Aug/  s/^09/Sep/  s/^10/Oct/  KYKLinux联盟
 s/^11/Nov/  s/^12/Dec/  s:^(.*)/(.*)/(.*):2 1 3:  KYKLinux联盟
 N  N  N  s/nT(.*)nN(.*)nP(.*)/NUM2NUMttYtt3tAMT1AMT/  KYKLinux联盟
 s/NUMNUM/-/  s/NUM([0-9]*)NUM/1/  s/([0-9]),/1/  KYKLinux联盟
 /AMT-[0-9]*.[0-9]*AMT/b fixnegs  KYKLinux联盟
 s/AMT(.*)AMT/1/  s/OUTY/-/  s/INNY/inco/  KYKLinux联盟
 b done :fixnegs  s/AMT-(.*)AMT/1/  s/OUTY/misc/  KYKLinux联盟
 s/INNY/-/ :done }  KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
附加的十一行使用替代和一些分支功能来美化输出。首先看一下这行：  KYKLinux联盟
KYKLinux联盟
         /AMT-[0-9]*.[0-9]*AMT/b fixnegs   KYKLinux联盟
  KYKLinux联盟
KYKLinux联盟
KYKLinux联盟
该行包含一个格式为 "/regexp/b label" 的分支命令。如果模式空间与规则表达式匹配，sed 将分支到 fixnegs 标号。您应该可以轻易找到该标号，它在代码中为 ":fixnegs"。如果规则表达式不匹配，则以常规方式继续处理下一个命令。 KYKLinux联盟
KYKLinux联盟
既然您理解该命令本身的工作原理，让我们看一下分支。如果看一下分支规则表达式，将看到它与后面依次跟有 '-'、任意数量的数字、一个 '.'、任意数量的数字和 'AMT' 的字符串 'AMT' 匹配。就象我确信您已猜到一样，该规则表达式专门处理负的美元金额。在这之前，用 'ATM' 括起美元金额，以便以后可以轻易找到它。因为规则表达式只与以 '-' 开始的美元金额匹配，所以，该分支只在恰巧处理借款时才发生。如果正处理贷款，应该将 OUTY 设置成 'misc'，将 INNY 设置成 '-'，并且应该除去贷款数量前面的负号。如果跟踪代码的流程，将看到实际情况正是这样。如果不执行分支，则用 '-' 替换 OUTY，用 'inco' 替换 INNY。完成了！现在输出行是完美的： KYKLinux联盟
KYKLinux联盟
 28 Aug 2000 misc - -       Y     CHECKCARD SUPERMARKET  -8.15KYKLinux联盟
man sed KYKLinux联盟
KYKLinux联盟
-n, --quiet, --silent
KYKLinux联盟
                                                                                
KYKLinux联盟
              suppress automatic printing of pattern space
KYKLinux联盟

KYKLinux联盟
前面举过例子：
KYKLinux联盟
[sam@Linux_chenwy sam]$ sed -n '2p' quote.txt 
KYKLinux联盟
It was an evening of splendid music and company.
KYKLinux联盟
如果没有-n,就把其它的都打印出来了
KYKLinux联盟
                                                                                 KYKLinux联盟
-e script, --expression=script
KYKLinux联盟

KYKLinux联盟
              add the script to the commands to be executed
KYKLinux联盟

KYKLinux联盟
呵�
 4/5   |‹ ‹‹ 2 3 4 5 ›› ›|

来顶一下

返回首页

相关文章

无相关信息

栏目更新

栏目热门