Linux 内容查找匹配命令

高频率命令

1. grep

   适合单纯的查找或匹配文本

   语法

   grep [-abcEFGhHilLnqrsvVwxy][-A<显示列数>][-B<显示列数>][-C<显示列数>][-d<进行动作>][-e<范本样式>][-f<范本文件>][--help][范本样式][文件或目录...] 

   参数说明

   • -a 或 --text : 不要忽略二进制的数据。
   • -A<显示行数> 或 --after-context=<显示行数> : 除了显示符合范本样式的那一列之外，并显示该行之后的内容。
   • -b 或 --byte-offset : 在显示符合样式的那一行之前，标示出该行第一个字符的编号。
   • -B<显示行数> 或 --before-context=<显示行数> : 除了显示符合样式的那一行之外，并显示该行之前的内容。
   • -c 或 --count : 计算符合样式的列数。
   • -C<显示行数> 或 --context=<显示行数>或-<显示行数> : 除了显示符合样式的那一行之外，并显示该行之前后的内容。
   • -d <动作> 或 --directories=<动作> : 当指定要查找的是目录而非文件时，必须使用这项参数，否则grep指令将回报信息并停止动作。
   • -e<范本样式> 或 --regexp=<范本样式> : 指定字符串做为查找文件内容的样式。
   • -E 或 --extended-regexp : 将样式为延伸的正则表达式来使用。
   • -f<规则文件> 或 --file=<规则文件> : 指定规则文件，其内容含有一个或多个规则样式，让grep查找符合规则条件的文件内容，格式为每行一个规则样式。
   • -F 或 --fixed-regexp : 将样式视为固定字符串的列表。
   • -G 或 --basic-regexp : 将样式视为普通的表示法来使用。
   • -h 或 --no-filename : 在显示符合样式的那一行之前，不标示该行所属的文件名称。
   • -H 或 --with-filename : 在显示符合样式的那一行之前，表示该行所属的文件名称。
   • -i 或 --ignore-case : 忽略字符大小写的差别。
   • -l 或 --file-with-matches : 列出文件内容符合指定的样式的文件名称。
   • -L 或 --files-without-match : 列出文件内容不符合指定的样式的文件名称。
   • -n 或 --line-number : 在显示符合样式的那一行之前，标示出该行的列数编号。
   • -o 或 --only-matching : 只显示匹配PATTERN 部分。
   • -q 或 --quiet或--silent : 不显示任何信息。
   • -r 或 --recursive : 此参数的效果和指定"-d recurse"参数相同。
   • -s 或 --no-messages : 不显示错误信息。
   • -v 或 --invert-match : 显示不包含匹配文本的所有行。
   • -V 或 --version : 显示版本信息。
   • -w 或 --word-regexp : 只显示全字符合的列。
   • -x --line-regexp : 只显示全列符合的列。
   • -y : 此参数的效果和指定"-i"参数相同。

   用法1

   # 在当前目录中，查找后缀有 file 字样的文件中包含 test 字符串的行 grep test *file 

   用法2

   # 管道用法 # 查找log.txt文件中包含test的行，且显示该行之后2行的内容 cat log.txt | grep test -A 2 

   用法3

   # 查找文件名中包含 log 的文件中不包含test 的行 grep -v test *log* 

2. sed

   适合编辑匹配到的文本

   语法

   sed [-hnV][-e<script>][-f<script文件>][文本文件] 

   参数说明

   • -e<script>或--expression=<script> 以选项中指定的script来处理输入的文本文件。
   • -f<script文件>或--file=<script文件> 以选项中指定的script文件来处理输入的文本文件。
   • -h或--help 显示帮助。
   • -n或--quiet或--silent 仅显示script处理后的结果。
   • -V或--version 显示版本信息。

   动作说明

   • a ：新增， a 的后面可以接字串，而这些字串会在新的一行出现(目前的下一行)～
   • c ：取代， c 的后面可以接字串，这些字串可以取代 n1,n2 之间的行！
   • d ：删除，因为是删除啊，所以 d 后面通常不接任何咚咚；
   • i ：插入， i 的后面可以接字串，而这些字串会在新的一行出现(目前的上一行)；
   • p ：打印，亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行～
   • s ：取代，可以直接进行取代的工作哩！通常这个 s 的动作可以搭配正规表示法！例如 1,20s/old/new/g 就是啦！

   用法

   # 在test文件的第四行后添加other sed -e '4a other' test  # 将 test.log 的内容列出并且列印行号，同时，将第 2~5 行删除 nl test.og | sed '2,5d'  # 将第2-5行的内容取代成为 this is test nl test.log | sed '2,5c this is test'  # 数据的搜寻并替换 sed 's/要被取代的字串/新的字串/g' 

   sed 的 -i 选项可以直接修改文件内容，对处理大文件很有用

   # 利用 sed 将 test.txt 内每一行结尾若为 . 则换成 ! sed -i 's/.$/!/g' test.txt 

3. awk

   适合格式化文本，对文本进行较复杂格式处理

   语法

   awk [选项参数] 'script' var=value file(s) 或 awk [选项参数] -f scriptfile var=value file(s) 

   参数说明

   • -F fs or --field-separator fs
     指定输入文件折分隔符，fs是一个字符串或者是一个正则表达式，如-F:。

   • -v var=value or --asign var=value
     赋值一个用户定义变量。

   • -f scripfile or --file scriptfile
     从脚本文件中读取awk命令。

   • -mf nnn and -mr nnn
     对nnn值设置内在限制，-mf选项限制分配给nnn的最大块数目；-mr选项限制记录的最大数目。这两个功能是Bell实验室版awk的扩展功能，在标准awk中不适用。

   • -W compact or --compat, -W traditional or --traditional
     在兼容模式下运行awk。所以gawk的行为和标准的awk完全一样，所有的awk扩展都被忽略。

   • -W copyleft or --copyleft, -W copyright or --copyright
     打印简短的版权信息。

   • -W help or --help, -W usage or --usage
     打印全部awk选项和每个选项的简短说明。

   • -W lint or --lint
     打印不能向传统unix平台移植的结构的警告。

   • -W lint-old or --lint-old
     打印关于不能向传统unix平台移植的结构的警告。

   • -W posix
     打开兼容模式。但有以下限制，不识别：/x、函数关键字、func、换码序列以及当fs是一个空格时，将新行作为一个域分隔符；操作符**和**=不能代替^和=；fflush无效。

   • -W re-interval or --re-inerval
     允许间隔正则表达式的使用，参考(grep中的Posix字符类)，如括号表达式[[:alpha:]]。

   • -W source program-text or --source program-text
     使用program-text作为源代码，可与-f命令混用。

   • -W version or --version
     打印bug报告信息的版本。

   用法1

   # 每行按空格或TAB分割，输出文本中的1、4项 awk '{print $1,$4}' test.txt 

   用法2

   # 使用","分割 awk -F, '{print $1,$2}' test.txt 

   用法3

   # 使用正则，~ 表示模式开始，// 中是模式 # 输出第二列包含 "test"，并打印第二列与第四列 $ awk '$2 ~ /test/ {print $2,$4}' test.txt 

4. 内容查看命令

   语法

   # 打印文件内容到标准输出设备上 cat [-AbeEnstTuv] [--help] [--version] fileName  # 类似 cat ，不过会以一页一页的形式显示 more [-dlfpcsu] [-num] [+/pattern] [+linenum] [fileNames..]  # 与 more 类似，但使用 less 可以随意浏览文件 less [参数] 文件  # 可用于查看文件的开头部分的内容，有一个常用的参数 -n 用于显示行数 head [参数] [文件]  # 可用于查看文件的内容，有一个常用的参数 -f 常用于查阅正在改变的日志文件 tail [参数] [文件] 

5. wc

   用于计算字数

   语法

   wc [-clw][--help][--version][文件...] 

   参数

   • -c或--bytes或--chars 只显示Bytes数。
   • -l或--lines 只显示行数。
   • -w或--words 只显示字数。
   • --help 在线帮助。
   • --version 显示版本信息。