现在您已经了解了使用命令行的基础知识,我想向您展示一些基于您的知识并使您能够执行更高级任务的技术。
首先,我将告诉您如何使用管道和重定向数据——这两种强大(且相关)的技术可以应用于许多不同的命令,以便以有用的方式组合它们,并对数据做更多的处理。接下来,您将掌握grep,这是一个帮助您定位包含指定字符模式的文件的工具。最后,我解释了如何将逻辑添加到Shell脚本的基础知识,使它们比简单的命令序列更有用。
正如你所想象的,这些只是使用命令行的许多高级技术中的一小部分,但我发现它们一直很有帮助,我希望你也会这样做。
第十章 学习高级技术管道和重定向数据管道(|)重定向输出(>)重定向输入(<)掌握 grep向Shell脚本添加逻辑变量和输入将命令行参数转换为变量获取交互式用户输入将命令的输出放入变量中流控制循环while循环for循环数学了解有关Shell脚本的更多信息在恢复模式下使用终端
大多数时候,当您在命令行上输入命令时,输出——文件列表、日期、日志内容或其他任何内容——都会直接显示在屏幕上。但这并不总是你想要的。
例如,也许某个命令的输出是数百或数千个文件的列表,但这比你需要的信息要多;您希望筛选列表以仅显示符合特定条件的文件。或者,在终端窗口中显示该列表可能对您没有用,但如果它在BBEdit文档中,则会有用。在这种情况下,您可以使用两个命令中的任何一个来获取命令的输出,并执行除在屏幕上显示之外的其他操作。您还可以使用稍微不同的命令来重定向命令以使用不同的输入。
|)管道运算符是键入 Shift - \ 时得到的 | 符号,它将命令的输出发送到另一个程序。要使用它,请键入第一个命令,然后键入空格、| 字符、另一个空格和第二个程序的名称。像这样:
xxxxxxxxxxprogram | other-program我们之前在【Ps】中看到了管道,在【命令行配方】中也有一些这样的例子,但让我再举一些例子来说明它是如何工作的,以及你可以用它做什么。
如果我使用 ls /Library/Preferences 命令显示 /Library/Preferences 文件夹中的所有内容,那将是一个相当长的列表。但假设我记得那个文件夹中的大多数项目都以 com.apple 开头,我只想看到最后一个,比如说10个项目,因为这会过滤掉大部分苹果的东西。然后我记得 tail 命令正是这样做的。通常, tail 希望您给它一个文件作为参数。但是,我可以使用管道运算符给它一个文件列表作为参数,如下所示:
xxxxxxxxxxls /Library/Preferences | tail这正是我所期望的——它只显示了该目录中的最后10个项目。如果我想显示最后15个,我可以输入:
xxxxxxxxxxls /Library/Preferences | tail -n 15大多数标志和参数与管道命令一样工作。例外情况:需要文件作为参数的命令通常会将文件放在命令之后,但当您使用管道时,顺序会颠倒。
再举一个例子怎么样?如果我使用 locate 命令查找名称中包含 Apple 的所有文件——同样是一个令人尴尬的大数字——它们都会以令人眼花缭乱的速度滚动。如果我想一次浏览一个屏幕——嘿,就像你可以用 less 的屏幕一样(见【查看文本文件】)——我可以把 locate 的输出管道化为更少的屏幕,就像这样:
xxxxxxxxxxlocate Apple | less或者,我可能想获取当前目录的路径并将其放在我的macOS剪贴板上。使用管道和 pbcopy (“粘贴板复制”)命令,很容易:
xpwd | pbcopy同样的想法也适用于其他命令。需要复制目录中每个GIF图像的列表吗?输入 ls *.gif | pbcopy 即可。
这些例子都很简单,但这个概念可以以各种方式扩展。如果命令可以接受文件作为参数,那么它可能可以在管道的右侧使用。
而且,如果你想知道,是的,你可以用链条连接管道(chain pipes)!也就是说,将一个程序的输出发送到第二个程序,将第二个的输出发送给第三个程序(以此类推)。因此,如果我想让我的剪贴板包含我的 /Library/Preferences 目录中最后十个文件的列表(不在屏幕上显示),我可以像这样组合前面的几个例子:
xxxxxxxxxxls /Library/Preferences | tail | pbcopy这是一种奖励实验的技术,所以看看你能想出什么其他有趣的组合。
xxxxxxxxxx提示:pbcopy命令有一个对应项,可以将Mac剪贴板上的任何内容粘贴到命令行上:pbpaste。
>)管道将一个程序的输出发送到另一个程序,而重定向输出(>)运算符将程序的输出传输到一个文件(不在屏幕上显示)。例如,也许我想把 /Library/Preferences 中的所有文件列表放在一个文本文件中,以便以后学习。我可以这样做:
xxxxxxxxxxls /Library/Preferences > ~/Desktop/prefs.txt这将在我的桌面上创建一个名为 prefs.txt 的文件,其中包含 ls 命令的输出——它列出了该目录中的所有内容。
您可以将重定向用于几乎任何在屏幕上显示其输出的(非交互式)程序。但要小心产生连续输出的命令;文件将无限期地增长。例如,您不想使用 top > file.txt ,因为 top 命令会产生动态输出。相反,您可以尝试 ps -ax > file.txt 来获取所有正在运行的进程的静态快照。
xxxxxxxxxx提示:如果您想使用重定向【添加】到现有文件,而不是替换其内容,请使用>>。例如:ps -ax >> file.txt
此时,也许你的齿轮正在转动,你想知道是否可以将管道和重定向组合在一条线上。为什么,是的,你可以!如果我想将目录中的最后10个项目放入主文件夹中的文本文件中,我可以这样做:
xxxxxxxxxxls /Library/Preferences | tail > ~/files.txt<)有时,执行与重定向输出相反的操作会有所帮助——您可能需要重定向输入。为了说明这意味着什么以及一种方法,让我们回到我们在Pipe(|)讨论中使用的 pbcopy 命令。
您可以将另一个进程的输出管道传输到 pbcopy ,但如果您希望 pbcopy 的输入是文件而不是另一个命令的输出呢?你怎样才能做到这一点?
对于一个简单的文本文件,你可以这样做:
xxxxxxxxxxcat file.text | pbcopy然而,有一种更简单的方法可以完成这项任务——使用重定向输入(<)运算符:
xxxxxxxxxxpbcopy < file.txt内容如下:将 pbcopy 的输入重定向到 file.txt 。它更高效,因为它只使用一个程序而不是两个程序。
grep根据您的要求,命令 grep 代表【globally search a regular expression and print】(全局搜索正则表达式并打印)或【global regular expression parser】(全局正则表达式解析器)。在任何情况下, grep 都是一种模式匹配工具,可以利用称为正则表达式(有时缩写为 regex 或 regexp )的字符序列来根据文件内容定位文件。如果你知道在文件中要查找什么,但不知道文件的名称或位置,那么这就是你想要的命令。
稍后我们将回到正则表达式。首先,让我们看看 grep 的一个非常基本的用法,它使用纯文本搜索字符串。
早些时候,在【查找文件】中,我展示了如何使用 find 命令按名称查找文件。也可以根据文件的内容使用 find 查找文件,但更简单的方法是使用 grep 命令。输入以下内容,将 your text 替换为要查找的内容:
xxxxxxxxxxgrep -R "your text" .例如,要查找当前目录及其子目录中内容(不一定是文件名)包含单词 Apple 的所有文件,我会使用:
xxxxxxxxxxgrep -R "Apple" .-R 标志表示“recursive,递归”,即查看所有子目录。另请注意末尾的句点(.)。这意味着“此目录”。因此,-R 和句点的组合意味着“从这个目录向下递归搜索”。要只搜索你所在的目录,你可以省略 -R ,但你也必须用星号(*)替换句点,表示“任何文件”——没有星号,grep 表示错误,因为你告诉它搜索一个目录,但它只搜索文件。
如果我想从我所在的父目录递归搜索,我会这样做:
xxxxxxxxxxgrep -R "Apple" ..这两个点(..)与我们在 cd 上使用的相同(请参阅【上移或下移】)。如果我想搜索一个特定的目录,我会填写它的路径:
xxxxxxxxxxgrep -R "Apple" /Library/Preferences我建议抵制将 /(整个磁盘)作为搜索目标的诱惑,因为搜索将非常耗时。
xxxxxxxxxx注意:默认情况下,grep会查找部分单词匹配;字符串“bar”既适配 *baroque* ,也适配 *lumbar*。
这是使用 grep 的简单方法,它非常有用。但是,如果你不是在寻找一个特定的字符串,比如 Apple ,而是一个模式,比如电话号码、网址或任何以单词 butter 开头的行,该怎么办?这就是正则表达式发挥作用的地方。
正则表达式基本上是正则字符和元字符的模式(如通配符、括号和其他特殊符号,它们告诉 grep 查找特定的字符或字符模式)。通过练习,您应该能够创建一个正则表达式,表示几乎任何可以用单词描述的文本。这里有一些简单的元字符可以让你开始;继续阅读如何将这些表达式合并到 grep 命令中:
.(句点)\+[ ] (例如,[abcde] 表示字母a、b、c、d或e中的任何一个;或 [1-5] 表示1到5中的任何数字)^因此,将这些的各种组合放在一起,我们可以寻找:
任何七位数的电话号码:
xxxxxxxxxx[0-9][0-9][0-9]\-[0-9][0-9][0-9][0-9]带括号的字符集可以包括范围,如 [0-9] 、[A-Z] 或 [a-z] 。因为某些字符(如 - )在正则表达式中具有特殊含义,所以您可以在它们之前加一个反斜杠( \ ),以表示您在这里查找的是文字字符。
任意数量的数字,后跟连字符和任意数量的附加数字:
xxxxxxxxxx[0-9]+\-[0-9]+任何一行开头的单词 butter 的实例:
xxxxxxxxxx^butter行首有三位或三位以上数字的任何数字:
xxxxxxxxxx^[0-9][0-9][0-9]+任何以数字或大写字母开头的行:
xxxxxxxxxx^[0-9A-Z].+您可以将字符范围组合在一组中。还有.+意思是“任何字符,一次或多次。”
这仅仅是个开始。有元字符来表示各种事物。再举几个例子:
[^ ]\s\t$\n您还可以将括号 ( ) 中的元素分组,使用管道 | 字符表示“or”,等等。(正则表达式有许多不同的版本,它们支持的元字符各不相同。)
现在让我们回到按内容搜索文件,因为这就是本主题的起点。假设我正在查找任何包含单词 Apple 作为行倒数第二个单词的文件。我从正则表达式开始:
xxxxxxxxxxApple\s[A-Za-z]\+$其内容为“单词Apple,后跟一个空格,后跟一行末尾的一个或多个大写或小写字母的任何字符串。”现在我将其输入 grep ,如下所示:
xxxxxxxxxxgrep -RIE "Apple\s[A-Za-z]\+$" .请注意两个新标志:
-E 表示“将此视为正则表达式,而不是纯文本”-I 表示“忽略二进制文件”(因为我知道我只搜索匹配的文本文件,这使得命令运行得更快,跳过了图像、音频和视频文件等内容,但也忽略了Microsoft Word文档和PDF等内容)。不用说,您还可以使用管道和重定向将grep与其他命令结合使用(如前一主题所述)。例如,要列出目录中的所有文件,但只显示包含单词Apple的文件,您可以尝试:
不用说,您还可以使用管道和重定向将 grep 与其他命令结合使用(如前一主题所述)。例如,要列出目录中的所有文件,但只显示包含单词 Apple 的文件,您可以尝试:
xxxxxxxxxxls /Library/Preferences | grep -ERI "Apple"所有这些仍然只是冰山一角。正则表达式不仅在 grep 中很有用,而且在Perl脚本和Nisus Writer Pro和BBEdit等macOS应用程序中也很有用。 grep 可以做的远不止我在这里描述的。
xxxxxxxxxx注意:要了解有关grep的更多信息,请阅读Kirk McElhearn的Macworld文章“使用grep查找任何内容”,要了解更多关于正则表达式的一般信息,请参阅Jason Snell的文章“使用正则表达式转换HTML”。您可能还喜欢阅读Jim Salter的Linux/BSD命令行魔法:学习用sed、awk和grep思考,其中涵盖了grep以及sed(用于进行文本替换)和awk(用于查找和替换列中的文本)。
当我向您展示如何【创建自己的Shell脚本】时,我给出的示例是简单的命令序列:先执行此,然后执行此,再执行此;然后结束。但有时你可能需要脚本更灵活。他们可能需要接受输入、做出决定、执行计算和使用其他类型的逻辑。
如果你做过任何类型的编程或脚本编写,你肯定会遇到变量(variables)、条件(conditionals)和循环(loops)等概念。您也可以在 zsh 和 bash 中使用所有这些东西,尽管您需要学习这些shell处理它们的特殊方式。或者,如果这些概念对你来说是全新的,shell脚本是通过实验学习的最简单方法之一。
我在这里的目的不是教你编程或提供广泛的教程,而只是提供一些简单的例子让你开始,以及一些指向你可以学习更多的地方的指针。
在 zsh 和 bash 中,变量和任何编程语言一样简单。你可以选择几乎任何你想用作变量的单词,并通过键入 = 和数字或字符串(任何字符序列)给它一个值。例如,如果我想要一个名为 city 的变量,我可以创建它并给它值 12345 ,如下所示:
xxxxxxxxxxcity=12345或者,如果我想让它有 New York的价值,我这样做:
xxxxxxxxxxcity="New York"我把 New York 放在引号里,因为它有一个空格。如果字符串没有空格,我可以省略引号,但把它们和字符串一起使用是一个好习惯,因为多词字符串很常见。除了这个细节之外,您不需要做任何特殊的事情来告诉 zsh 或 bash 变量是整数还是字符串——这一区别在大多数其他编程语言中都很重要。
xxxxxxxxxx注意:您会注意到=符号周围没有空格。这一点至关重要:如果您使用空格(如city=12345),shell会错误地认为变量名是命令的名称,脚本将无法运行。
稍后,如果我想对我的变量做点什么,比如在屏幕上显示它,在计算中使用它,或者将它与另一个值进行比较,我会在它前面放一个美元符号($)。例如,这个(毫无意义)脚本为变量赋值,然后显示它:
xxxxxxxxxxcity="New York"echo $city我想向您展示三个额外的变量技巧,其中两个涉及从用户那里获取输入。
我们已经看到很多接受参数的命令。例如,命令 nano file.txt 在 nano 编辑器中打开文件 file.txt , ls /Library 列出 /Library 目录的内容。你可以对自己的脚本做同样的事情:在脚本名称后添加一个或多个参数,为脚本提供更多关于你想让它做什么的信息。最重要的是,它几乎不需要任何努力。
当您输入一个脚本名称,后跟一个空格和一个或多个术语时,每个术语都会按照键入术语的顺序自动分配给名为 $1、$2、$3 等的变量。例如,假设我们创建了这个脚本并将其命名为 test.sh :
xxxxxxxxxxecho "The first three arguments you entered were $1, $2, and $3."现在按如下方式运行脚本:
xxxxxxxxxx./test.sh Alice Bob Carol输出将是:
xxxxxxxxxxThe first three arguments you entered were Alice, Bob, and Carol.如果您输入了三个以上的参数,其余的将被忽略(尽管您可以很容易地向脚本中添加 $4 ),如果您输入的参数较少,响应将有一些空格,如:
xxxxxxxxxxThe first three arguments you entered were Alice, , and .(是的,你可以在脚本中添加逻辑来消除这些空白,但我现在尽量保持简单。)
请注意,您可以在命令行上键入的任何内容都可以是变量,包括路径名和文件名。
xxxxxxxxxx提示:如果你出于任何原因需要你的脚本知道它自己的名字,这很容易——它会自动存储在一个变量中:$0。
您还可以让脚本在运行时向您提问,并将您的响应转换为变量。您可以使用命令 read ,后跟要存储响应的变量名称来执行此操作:
xxxxxxxxxxecho "What do you have to say for yourself?"read replyecho "Oh yeah? Well, $reply to you too!"如果需要,脚本可以与用户进行广泛的对话,每个响应都会影响脚本中稍后发生的事情。
我想提到的最后一个变量技巧在脚本需要运行命令并对该命令的输出进行处理时非常有用。例如,如果使用 date 命令查找日期,则可能需要将日期放入变量中,以便以后可以将其用作文件名的一部分。或者,如果您的脚本使用 pwd 命令查找当前目录的路径,您可能希望稍后在保存文件时使用该信息。
为此,将有问题的命令(包括任何标志或参数)括在括号中,并在括号前加上美元符号 $ ,如下所示:
xxxxxxxxxxtoday=$(date)或者
xxxxxxxxxxdirectory=$(pwd)然后,稍后您可以分别引用 $today 或 $directory 来检索这些变量的内容。
脚本经常根据用户输入或运行时遇到的信息做出决策。例如,假设你有一个重命名目录中文件的脚本,但如果它们是文本文件,你想以一种方式重命名它们,如果它们是PDF,你想用另一种方式命名它们,如果是PNG图形,你想使用第三种方式重命名它们。或者,假设您想向用户询问一个数字,如果数字小于或等于5,则执行一个操作,但如果数字更大,则执行不同的操作。
在这种情况下,你需要 if、then 和 else 等条件语句。这些有时被称为流控制(flow control)语句,因为它们决定了脚本所采用的路径。
zsh 和 bash shell有一种奇怪的 if/then 语句结构方式。以下是基本结构:
xxxxxxxxxxif [ condition to test ]then action to takefi我想在这里指出几个关键点:
true/false 结果的数学或逻辑测试)必须在括号内用空格括起来。(请记住,在变量赋值中,= 周围不能有空格;在这里,它们是必需的。)if 行之后,您需要单词 then ——要么单独放在一行上(如上所述),要么放在分号后的同一行(如我在下一个例子中所示)。then 后面的命令缩进几个空格或一个选项卡,但这只是为了让你的脚本更容易阅读。如果你愿意,你可以把它们去掉。if 语句都必须以 fi 结尾(即 if 向后),这相当于其他语言中的 end 或 endif 。下面是一个完整的脚本,显示 if 是如何工作的:
xxxxxxxxxxecho "Pick a number."read replyif [ $reply -le 5 ]; then echo "$reply is less than or equal to 5"fi(我们稍后会讲到那个有趣的 -le 事情。)
但是等等……如果这个数字大于5怎么办?然后,您需要扩展 if 语句以包含 else (如果出现的条件为假,该怎么办)。
你这样做:
xxxxxxxxxxecho "Pick a number."read replyif [ $reply -le 5 ]; then echo "$reply is less than or equal to 5"else echo "$reply is greater than 5"fi您也可以检查两个或多个条件。例如,如果数字小于5,做一件事;如果数字正好是5,做第二件事。
为此,您将添加 elif(“else if”)以及另一个 then ,如下所示:
xxxxxxxxxxecho "Pick a number."read replyif [ $reply -lt 5 ]; then echo "$reply is less than 5"elif [ $reply -eq 5 ]; then echo "$reply is exactly 5"else echo "$reply is 5 or greater"fi好吧,第一个例子中的那个有趣的 -le ,或者最后一个例子里的 -lt 呢?这些分别表示小于或等于和小于。我知道这很奇怪,但 zsh 和 bash 不使用 ≤ 或 <= 这样的符号,在很大程度上依赖于缩写。以下是您可能需要知道的更长的运算符列表:
-gt-lt-eq=(见下面的注释)!=-ge-le-n-z&&||!特别小心那些“等于”(is equal to)运算符,因为如果你对所比较的类型使用了错误的运算符,你会得到错误的结果(或错误消息)。例如,如果 $this 是一个数字,你可能会有 if [ $this -eq 5 ] ,但如果 $this 是一个字符串,你必须使用 if [ $this= “Joe” ] 。
xxxxxxxxxx注意:在bash脚本中,可以使用==代替=来比较字符串,但在zsh中,必须使用单个=。
为了对目录中的每个文件、文件中的每一行或任何东西执行操作,您需要一个循环。与大多数编程语言一样,zsh 和 bash 提供了几种循环变体。这是他们的样子。
如果你需要重复一个动作,只要某个条件为真(或者当它为真时),但当它变为假时停止,你需要一个while循环。结构如下:
xxxxxxxxxxwhile [ condition to test ]do stuff to dodone例如,这个 while 循环显示从 1 到 10 的数字:
xxxxxxxxxxcount=1while [ $count -le 10 ]do echo "$count" ((count++))donexxxxxxxxxx注意:与if/then语句一样,do可以单独行,也可以与while在同一行,用分号分隔。
我们首先说 $count 变量是整数 1 ,每次通过循环时,我们都会显示它的当前值,然后加1。这就是 ((count++)) 行的作用——双括号表示“这是一个数学运算”, ++ 表示“加1”。
for循环从一个列表(list)、序列(series)或一系列(range)项目(数字、文件等)开始,并对每个项目执行一次或多次操作。其基本结构为:
xxxxxxxxxxfor variable in listdo stuff to dodone例如,这里有一个简单的脚本,显示五条连续的消息,每条消息都有当前迭代的编号:
xxxxxxxxxxfor i in 1 2 3 4 5do echo "This is iteration number $i"done您还可以使用括号表示一个范围,如 {1..5} (请注意,数字之间只有两个句点,而不是三个)。这些项目不一定是数字——它们可以是任何东西。例如:
xxxxxxxxxxfor i in Red Orange Yellow Green Bluedo echo "$i is a lovely color."done如果一个范围内的项目包含空格,则必须在空格前加一个反斜杠来转义空格:
xxxxxxxxxxfor i in New\ York Seattle San\ Francisco说到数学,bash 大约是一年级水平,而 zsh 则更好一些,可以通过可选模块进一步扩展。然而,这两个shell都可以做数学基础,如加、减、乘、除和比较整数(整数)。您可以在 bash 脚本中使用外部计算器(如 bc )来执行更高级的计算。
正如我们在【while循环】中看到的,你可以通过用双括号括起来告诉 zsh 或 bash 你想让它计算一些东西:
xxxxxxxxxx((7*5+3))但是,如果你想对这个结果做任何事情,比如把它赋值给一个变量,你必须在开头添加一个 $ ,这在 zsh 和 bash 中被称为算术展开:
xxxxxxxxxxnumber=$((7*5+3))实现相同结果的另一种方法是使用 let 命令,该命令还需要在整个表达式(包括变量)周围加上引号,如下所示:
xxxxxxxxxxlet "number=7*5+3"xxxxxxxxxx提示:作为提醒,您可以稍后通过在变量前加上$来检索变量,例如:echo $number。
xxxxxxxxxx注意:虽然zsh和bash有时需要空格,有时禁止空格,但它们在数学表达式中是可选的。因此,number=$((7*5+3)) 和 number=$(( 7 * 5 + 3 ))。
你可以找到很多专门教授 zsh 和 bash 脚本编写的网站,从初级到高级。以下是一些示例:
如果您的Mac存在问题,无法正常启动,您可以使用恢复模式运行磁盘实用程序或执行其他维护。在恢复模式下,您还可以使用终端,它可以方便地运行某些命令,例如,在Mac上查找文件并将其复制到闪存驱动器上。
特别是,您需要终端重置忘记的管理员密码。以下是操作方法:
bash shell(是的,即使在蒙特利也是如此)。resetpassword ,然后按 Return 。您可能需要等待一两分钟,但会打开一个名为“重置密码”的新窗口。如果它在终端窗口后面,请单击它将其带到前面。请注意,在恢复模式下,bash shell只提供其常规命令的一个子集(其他可用的shell只有 sh和 dash —— zsh 不存在)。要查看可用的命令,请输入 ls /bin /sbin /usr /bin /usr /sbin 。或者按Esc键两次,如侧栏【我可以运行哪些程序?】中所述。