你好，我是葛俊。今天，我继续和你分享命令行工具的使用。 在上一篇文章中，我与你介绍了命令行环境中的终端、Shell，以及远程连接的设置，解决了环境配置的问题。今天，我们再来看看具体的命令行工具的使用技巧。我会根据常见的工作场景来组织这些工具，因为优化工作流程、提高效率才是学习工具的真正目的。 从我的经验来看，开发人员最常见的、使用命令行的场景主要包括两个： - 日常的操作，比如文件夹跳转、处理和搜索文件夹和文件内容、查看和管理系统信息； - 开发中常见的工作，比如Git的使用、API调试、查看日志和网络状况等。 我会重点与你分享这些场景中有哪些推荐工具以及使用技巧。而至于这些工具如何安装的内容，网络上已经有很多了，我就不再详细描述了。 ## 日常操作中的工具和技巧 关于日常操作，Linux/Unix系统已经自带了一些工具，另外还有些产生已久、为我们所熟悉的工具。不过，要更高效地完成工作，我们还有更强大的工具可以选择。 ### 第一个场景：列举文件夹和文件，查看文件 **列举文件**的默认工具是ls。除此之外，一个常用的工具是tree，可以列出文件夹的树形结构： 另外，还有些比tree更方便的工具，比如alder和exa。exa尤其好用，优点包括： - 默认就有漂亮的颜色显示，并且不同种类文件颜色不同； - 可以像ls一样显示当前文件夹，也可以像tree一样显示树形结构。 另外，exa还支持对文件状态显示的加强。 比如，添加–git选项，exa会显示文件的git状态，在文件名的左边，用两个字母来表示文件在工作区和Git暂存区的状态。其中，N表示新文件，M表示文件修改等。exa的显示和git status命令输出的简单对比，如下图所示。 再比如，使用–extend选项显示文件的额外信息。 再比如，使用group-directories-first选项，先显示文件夹再显示文件。 至于**查看文件**，Linux默认的工具是cat。相比起来，bat是一个更好用的替代品，除高亮显示外，还可以显示Git的更改状态。 ### 第二个场景：查找并打开文件，进行查看和编辑 一个常用的办法是，使用上面提到的工具来列出文件名，然后使用grep进行过滤查看，或者VIM进行查看和编辑。比如，使用命令 ``` tree -I "node_modules" -f | grep -C3 index.md ``` 可以得到当前文件夹中的所有index.md文件。 命令中，tree的参数-I，表示排除文件夹node_modules；tree的参数-f，表示显示文件时包含文件路径，方便你拷贝文件的全名；grep的参数-C3，代表显示搜索结果3行的上下文。 我们也可以使用VIM代替grep，进行更复杂的查找和编辑工作。我可以把tree的输出传给VIM，然后在VIM中查找index.md，使用n跳到下一个搜索结果，使用VIM命令gF直接打开文件，进行编辑后使用\bd命令关闭这个index.md文件。然后，用同样的方式查找并编辑第二、三、四个index.md，从而实现对当前文件夹下每一个index.md文件的查看和修改： 事实上，这正是一个**很常见的命令行工作流**：把某一个命令的输出传给VIM，输出里包含有其他文件的完整路径，比如上面例子中index.md的路径，然后在VIM里使用gF命令查看并处理这些文件。我推荐你也尝试使用这种工作流。 另外，在上面的例子中，我使用tree命令来列举文件名。其实，很多时候我们**使用find这种专门用来查找文件的命令会更加方便**。不过，我今天要介绍的不是find，而是它的一个替代品，即fd。 我推荐fd的原因主要有3个： - 语法比find简单； - fd默认会忽略.gitignore文件里指定的文件； - 忽略隐藏文件。 后两点对开发者来说非常方便。比如，我在搜索时，并不关心node_modules里面的文件，也不关心.git文件夹里的文件，fd可以自动帮我过滤掉。 另外，fd高亮显示，速度也很快。至于对查找到的文件进行编辑，跟上面提到的方法一样，用管道（Pipe）传给VIM，然后使用gF命令即可。 ``` fd index.md | vim - ``` 另外，关于查找文件内容的工具grep，我常用的一个替代品是RipGrep（rg）。跟fd类似，它也很适合开发者，有如下4个特点： - 默认忽略.gitignore文件里指定的文件； - 默认忽略隐藏文件； - 默认递归搜索所有子目录； - 可以指定文件类型。 比如，使用rg tags就可以方便地查找当前目录下所有包含tags的文件。它的查找速度非常快，显示也比grep要漂亮： ``` > rg tags package-lock.json 2467: "common-tags": { 2469: "resolved": "https://registry.npmjs.org/common-tags/-/common-tags-1.8.0.tgz", 5306: "common-tags": "^1.4.0", 5446: "common-tags": "^1.4.0", src/pages/2019-05-24-procrastination/index.md 6:tags: ['自我成长', '拖延症'] src/pages/2018-07-21-first-post/index.md 5:tags: ['this', 'that'] ``` ### 第三个场景：文件夹之间跳转 关于文件夹间的跳转，在Bash中有cd和dirs命令；在Zsh和Fish中，可以使用文件夹名字直接跳转；另外，Zsh支持`..`、`...`和`-`等别名，用来分别跳转到父目录、父目录的父目录，以及目录历史中上一次记录，而不需要写cd。 接下来，我与你介绍**几个新的工具来支持更快的跳转**。 实际上文件夹的跳转，有两种常见的情况： - 一种是，快速跳转到文件夹跳转历史中的某条记录，即之前曾经去过的某个文件夹； - 另一种是，快速找到当前文件夹中的某个子文件夹，并跳转过去。 对于第一种情况，常用的工具有两个，一个是fasd，另一个是z，它们差别不是特别大。我用的是z，具体用法是：z会按照访问频率列出最近访问过的文件夹，并使用字符串匹配的方式让你实现快速跳转。 比如，用z dem来进行匹配和自动补全，找到我想去的demo文件夹，回车直接完成跳转。同时，我也可以用z dem<回车> 直接跳转。 对于第二种情况，即快速定位某个子文件夹，我介绍一个**超级酷的工具fzf**。本质上讲，fzf是一个对输入进行交互的模糊查询工具。它的使用场景非常多，文件夹的跳转只是一个应用。所以，我还在再后面文章做更多的详细讨论。 安装好fzf之后，你就可以使用Ctrl+T进行文件夹的交互式查询，或者使用Alt+C进行文件夹跳转。 比如，我想跳转到src/component文件夹中，可以输入Alt+C，fzf就会列出当前文件夹下的所有文件夹。比如，我输入com，没输入其他字符，fzf会更新匹配到的文件夹，这时可以使用Ctrl+P、Ctrl+N进行上下选择，按下回车就可以进入选中的文件夹。 ### 第四个场景：文件管理 系统自带的文件管理工具有cp、mv、rsync等。这里，我再介绍一些更方便的工具。 首先是一个用来**重命名文件的小工具，叫作vidir**。顾名思义，vidir就是VI来编辑目录的。具体使用方法很简单，vidir命令后面接一个文件夹时，vidir会打开VIM，VIM里面列举该文件夹中所包含的文件和子文件夹，然后使用VIM的命令来修改文件和文件夹的名字之后保存退出。这时，vidir会自动帮助我们完成对文件和文件夹的重命名。 vidir之所以使用VIM来修改文件，是因为VIM功能强大，修改非常方便。另外，vidir也可以从管道接收文件夹和文件的列表。比如，我想把当前文件夹下所有前缀为index的文件，都在文件名前添加“new-”。这时，我可以使用命令fd | vidir -。 这样，fd命令会把当前文件夹下所有文件名传给vidir。然后，vidir打开VIM，我们在VIM界面中修改文件名即可。如下所示的录屏图片中，包括了使用VIM的重复命令.的技巧。 另外一组方便进行文件管理的工具是，**命令行的文件管理器**，即使用键盘命令在终端界面进行文件夹跳转、查看文件和移动文件等操作。这种命令行界面上的UI叫做TUI（Terminal UI）。十多年前的Borland终端IDE，就是这一类工具的翘楚，使用熟练之后效率会很高。 TUI的文件管理器我用过3个：Midnight Commander (以下简称mc)、Ranger和nnn。 mc是两个窗口的文件管理器。如果你使用过Windows Commander（Total Commander）的话，你就会对它的用法很熟悉。重要的命令有：使用tab进行两个窗口的切换、使用F4进行编辑、使用F5进行拷贝、使用F9进入菜单、使用F10退出。 我提供了一张录屏图片，简单演示了在一台远端服务器上使用mc进行多文件拷贝和编辑，并通过菜单修改显示主题的场景。 Ranger和nnn是单窗口的文件管理器。Ranger稍微有一点延迟，所以我一般使用nnn。因为是单窗口，所以与我们平时在GUI中使用的文件管理器比较相似。 比如，在拷贝文件的时候，需要先进入文件所在文件夹，选择文件，然后进入目标文件夹，再使用拷贝命令把文件拷贝过去。我在录屏中演示了在nnn中进行文件夹的跳转、创建，文件的选择、拷贝，使用系统工具打开当前文件，查看帮助等功能。 总的来说，这3个工具中我使用最多的是nnn。跟mc相比，它最大的好处是快捷键设置跟VIM一致，不需要大量使用功能键F1~F12。 ## 开发中常见的工作 ### Git 命令行中的Git工具，除了原生的Git之外，常见的还有tig、grv、lazygit和gitin。 我常用的是tig。因为在tig中，我可以方便地进行查看改动、产生提交、查看历史（blame）等操作，功能非常强大。比如，在查看文件改动时，我们可以方便地使用命令1有选择性地把一个文件中改动的一部分添加到一个提交当中，实现[第26篇文章](https://time.geekbang.org/column/article/154378)中提到的git add -p的功能。 另外，我还可以通过tig快捷地查看一个文件的历史信息。 关于这两个功能的使用，你可以参考下面的录屏图片。 ### Web 访问 我常用的Web访问工具是HTTPie，是curl命令的一个补充。HTTPie的强项在于，专门针对HTTP协议，所以可以做到格式简单、易用性强两点。 而curl的优势，则包括功能强大、支持多种协议和基本所有服务器上都有预装。 关于这两个工具，我的建议是，curl肯定要学，HTTPie如果用得到也值得花时间学习。 ### 对JSON进行处理 在命令行对JSON文本进行处理，最常见的工具是jq。它能够对JSON进行查询和修改处理，功能很强大。 举一个查询的例子，我们有这样一个person.json文件列举某个人的详细信息： ``` $ cat person.json { "id": { "bioguide": "E000295", "thomas": "02283", "fec": [ "S4IA00129" ], "govtrack": 412667, "opensecrets": "N00035483", "lis": "S376" }, "name": { "first": "Joni", "last": "Ernst", "official_full": "Joni Ernst" }, "bio": { "gender": "F", "birthday": "1970-07-01" }, "terms": [ { "type": "sen", "start": "2015-01-06", "end": "2021-01-03", "state": "IA", "class": 2, "state_rank": "junior", "party": "Republican", "url": "http://www.ernst.senate.gov", "address": "825 B&C Hart Senate Office Building Washington DC 20510", "office": "825 B&c Hart Senate Office Building", "phone": "202-224-3254" } ] } ``` 可以方便地使用cat person.json | jq .”对JSON进行格式化输出， ``` $ cat people.json | jq . { "id": { "bioguide": "E000295", "thomas": "02283", "fec": [ "S4IA00129" ], "govtrack": 412667, "opensecrets": "N00035483", "lis": "S376" }, "name": { "first": "Joni", "last": "Ernst", "official_full": "Joni Ernst" }, "bio": { "gender": "F", "birthday": "1970-07-01" }, "terms": [ { "type": "sen", "start": "2015-01-06", "end": "2021-01-03", "state": "IA", "class": 2, "state_rank": "junior", "party": "Republican", "url": "http://www.ernst.senate.gov", "address": "825 B&C Hart Senate Office Building Washington DC 20510", "office": "825 B&c Hart Senate Office Building", "phone": "202-224-3254" } ] } ``` 以及使用jq ".terms[0].office"命令查询他的第一个工作任期的办公室地址。 ``` $ cat person.json | jq ".terms[0].office" "825 B&c Hart Senate Office Building" ``` 但，jq存在的最大问题是，它有一套自己的查询处理语言。如果使用jq的频次没那么高的话，很难记住，每次都要去查帮助才可以。 针对这种情况，有人设计了另一种类似的工具，直接使用JavaScript作为查询处理语言，典型代表是fx和jq.node。这，就大大方便了使用JavaScript的开发者，因为可以使用已经熟悉了的语法。 比如，对于上个案例的JSON文件，我可以方便地在fx工具中使用JavaScript的函数filter()进行过滤查询。 ``` $ cat person-raw.json| fx 'json => json.terms.filter(x => x.type == "top")' [ { "type": "top", "office": "333 B&c Hart CIrcle Building", "phone": "202-224-3254" } ] ``` ### 查找、关闭进程 通常情况下，我们使用kill和pkill，来查找和关闭进程。但，使用fzf之后，我们可以方便地进行交互式的查找目标进程。具体使用方法是，输入kill ，fzf就会提供一个交互式的界面供你查找目标进程，然后回车确认即可。 在命令行上进行交互式的操作，非常爽，我推荐你一定要试试。 ### 查看日志文件 关于查看日志文件的工具，我推荐lnav。它比tail -F要方便、强大得多，有很多很棒的功能，包括： - 支持很多日志格式，比如syslog、sudo、uWSGI等，并可以根据格式高亮显示； - 支持多个日志同时显示，并用不同颜色区分； - 支持正则表达式进行过滤等。 ### 命令行本身的实用技巧 关于命令行的使用技巧，有两个非常值得一提：一个是!$，另一个是!!。 **第一个!$**，代表上一个命令行的最后一个参数。比如，如果我上一条命令使用 ``` $ vim src/component/README.txt ``` 下一步我想为它产生一个备份文件，就可以使用!$： ``` ## 以下命令即 copy vim src/component/README.txt vim src/component/README.txt.bak $ cp !$ !$.bak ``` **第二个常用的是!!**，表示上一个命令的完整命令。最常用的场景是，我先拷贝一个文件，发现没有权限，需要sudo，下一步我就可以用sudo !!来用sudo再次运行拷贝命令。 ``` ## 因为权限不足，命令失败 $ cp newtool /usr/local/bin/ ## 重新使用sudo运行上一条命令。即 sudo wtool /usr/local/bin/ $ sudo !! ``` ## 小结 今天，我与你介绍了很多工具。使用工具提高研发效能，最关键的是找到真正常用的工作场景，然后去寻找对应的工具来提高效率。 需要注意的是，只有重复性高的工作，才最适合使用命令行工具；否则，用来适应工具的时间，可能比节省下的时间还要多。这，是命令行的一个基本特点。 最后，我把今天与你讨论的Linux/Unix系统自带工具和替代工具，整理为了一张表格，以方便你复习： ## 思考题 不知道你有没有注意到，在录屏中我多次用到了一个叫作tldr的工具。你知道它是什么作用吗？ 感谢你的收听，欢迎你在评论区给我留言分享你的观点，也欢迎你把这篇文章分享给更多的朋友一起阅读。我们下期再见！