有哪些html网页设计的比赛,优化大师apk,中国最大的门户网站是,全国设计大赛官网1. grep 简介 grep 是一种强大的文本搜索工具#xff0c;它能使用正则表达式搜索文本#xff0c;并把匹配的行打印出来。通常grep有三种版本grep、egrep#xff08;等同于grep -E#xff09;和fgrep。egrep为扩展的grep#xff0c;fgrep则为快速grep#xff08;使用固定…1. grep 简介 grep 是一种强大的文本搜索工具它能使用正则表达式搜索文本并把匹配的行打印出来。通常grep有三种版本grep、egrep等同于grep -E和fgrep。egrep为扩展的grepfgrep则为快速grep使用固定的字符串来对文本进行搜索不支持正则表达式的引用但是查询极为快速。grep是Linux文本处理三剑客之一与 sed、awk 相比 grep 的使用或许简单一些但是 grep 的搜索能力非常强大值得学习一下。 【sed 命令详解】 https://blog.csdn.net/qq_42226855/article/details/134792377 【awk 命令详解】 https://blog.csdn.net/qq_42226855/article/details/135089290 2. grep 基本语法 grep 命令的基本语法是 grep [options] pattern [input_file_names]这个命令的各个部分如下 options这些是可选的命令行选项用于控制 grep 命令的行为。一些常见的选项包括此处仅列举了部分选项 -c: 只输出匹配行的数量不显示实际的匹配行。 -i: 忽略大小写进行匹配。 -v: 反向选择即输出不包含指定模式的行。 -n: 在输出的每一行前加上其在文件中的行号。 -l: 只列出包含匹配模式的文件名而不是显示匹配的内容。 -r 或 -R: 递归地搜索目录及其子目录中的文件。 pattern这是要搜索的文本模式或正则表达式。如果未使用 -e 或 -f 选项那么 pattern 就会被直接当作搜索模式。 input_file_names这些是要搜索的输入文件名。可以指定一个或多个文件名也可以使用通配符如 *来匹配多个文件。如果不指定任何文件名grep 会从标准输入读取数据。 以下是一些示例grep 总是对输入的每个单行进行匹配 搜索单个文件中包含 “example” 的行 grep example file.txt使用 -i 选项忽略大小写并搜索多个文件 grep -i example file1.txt file2.txt使用 -r 选项递归搜索目录及其子目录中的所有文件 grep -r example directory/使用 -c 选项只输出匹配行的数量 grep -c example file.txt2.1 命令行选项 [options] grep 命令行选项可以分为几个类别 POSIX 标准选项这些是按照 POSIXPortable Operating System Interface标准定义的选项旨在确保在不同操作系统和实现之间的一致性。例如 -c: 只输出匹配行的数量。 -i: 忽略大小写进行匹配。 -l: 列出包含匹配模式的文件名。 -n: 在输出的每一行前加上其在文件中的行号。 -v: 反向选择即输出不包含指定模式的行。 GNU 扩展选项GNU 版本的 grep 提供了一些额外的、非 POSIX 标准的选项以增强功能和灵活性。例如 -E: 使用扩展正则表达式ERE而不是基本正则表达式BRE。 -F: 将模式视为固定字符串而非正则表达式。 -o: 只输出匹配的部分而不是整个行。 -P: 使用 Perl 兼容的正则表达式PCRE。 长选项除了短选项如 -c、-i 等许多命令也支持长选项通常是为了提高可读性和清晰度。例如-c 的长选项形式是 --count-i 的长选项形式是 --ignore-case。 移植性和兼容性选项为了方便在不同系统间移植脚本或与旧版本的工具兼容grep 可能会提供一些特定的选项或行为。例如传统的 grep 实现可能不支持某些 GNU 扩展选项因此在编写跨平台脚本时需要考虑到这一点。 特殊情况和设计考虑某些选项的设计可能还考虑到了特殊用例或情况。例如-q 参数quiet mode在 GNU grep 中用于静默搜索只检查是否存在匹配而不输出任何内容。而在某些传统 grep 实现中-s 参数可能会有类似的行为但在 POSIX 规范中-s 参数实际上表示“silent”模式用于处理二进制文件而不产生错误。 2.1.1 获取常规程序信息 grep 命令提供了以下两个选项来获取常规程序信息 --help 功能这个选项用于打印命令行帮助信息包括可用的选项、参数和简要说明。 用途当你不确定如何使用 grep 命令或者需要查看某个选项的具体含义时可以使用这个选项获取帮助。 [rootufo666 ~]# grep --help Usage: grep [OPTION]... PATTERN [FILE]... Search for PATTERN in each FILE or standard input. PATTERN is, by default, a basic regular expression (BRE). Example: grep -i hello world menu.h main.cRegexp selection and interpretation:-E, --extended-regexp PATTERN is an extended regular expression (ERE)-F, --fixed-strings PATTERN is a set of newline-separated fixed strings-G, --basic-regexp PATTERN is a basic regular expression (BRE)-P, --perl-regexp PATTERN is a Perl regular expression-e, --regexpPATTERN use PATTERN for matching...-V 或 --version 功能这两个选项用于打印 grep 的版本信息。通常输出会包含 grep 的版本号、版权信息以及可能的 bug 报告地址。 用途当你需要了解正在使用的 grep 版本或者在报告 bug 时需要提供版本信息时可以使用这个选项。 grep -V 或 grep --version[rootufo666 ~]# grep -V grep (GNU grep) 2.16 Copyright (C) 2014 Free Software Foundation, Inc. License GPLv3: GNU GPL version 3 or later http://gnu.org/licenses/gpl.html. This is free software: you are free to change and redistribute it. There is NO WARRANTY, to the extent permitted by law.2.1.2 匹配控制选项 以下是 grep 命令中匹配控制选项 -e pattern 或 --regexppattern 功能指定一个正则表达式模式用于搜索。可以使用多个 -e 选项来指定多个查询规则。 示例grep命令会在file.txt文件中搜索与任一模式匹配的行并将其打印出来。 grep -e pattern1 -e pattern2 file.txt注意如果在命令行中直接输入模式而不使用 -e 选项那么 grep 将默认使用该模式作为搜索规则。 -f file 或 --filefile 功能从指定的文件中读取匹配规则每行作为一个规则。空文件不包含任何规则因此不会匹配任何内容。 grep -f rules.txt input.txt-i, -y, 或 --ignore-case 功能在搜索过程中忽略大小写差异即进行不区分大小写的匹配。 grep -i PATTERN file.txt-v 或 --invert-match 功能获取未匹配的行即输出不包含指定模式的行。 示例在file.txt文件中搜索不包含pattern的行并将其打印出来。 grep -v pattern file.txt-w 或 --word-regexp 功能获取包含整个单词的匹配行单词由字母、数字和下划线组成并且两边不能是这些字符。 grep -w word file.txt[rootufo666 ~]# echo -e AAA\nAAAB |grep -w AAA AAA这里的“整个单词”指的是符合以下条件的单词 单词由字母、数字和下划线组成。单词两边不能是字母、数字和下划线。 换句话说-w选项会确保匹配的单词不是其他单词的一部分而是作为一个完整的单词存在。 -x 或 --line-regexp 功能要求整行匹配即只有当整个行与指定模式完全匹配时才会输出该行。 grep -x exact line file.txt[rootufo666 ~]# echo -e AAA B\nAAAB\nAAA |grep -x AAA AAA2.1.3 常规输出控制 以下是 grep 命令中常规输出控制选项 -c 或 --count 功能输出文件中匹配行的数量而非匹配的内容。与 -v 参数一起使用可以统计未匹配的行数量。 示例统计当前目录下所有 .txt 文件中包含 ‘example’ 的行数。 grep -rc example *.txt[rootufo666 ~]# grep -rc word *.txt 666.txt:0 data.txt:0 file1.txt:3 file.txt:3 output.txt:0[rootufo666 ~]# echo -e AAA B\nAAAB\nAAA |grep -c AAA 3 [rootufo666 ~]# echo -e AAA B\nAAAB\nAAA |grep -vc AAA 0统计当前目录及其子目录中不包含 ‘example’ 的所有 .txt 文件并输出文件名。 grep -Lr example ./*.txt# 缺少了 file.txt、file1.txt 文件 [rootufo666 ~]# grep -Lr word ./*.txt ./666.txt ./data.txt ./output.txt--color[WHEN] 或 --colour[WHEN] 功能通过环境变量 GREP_COLORS 定义高亮颜色来突出显示匹配项。默认值为 ‘ms01;31:mc01;31:sl:cx:fn35:ln32:bn32:se36’。WHEN 参数可设置为 never, always 或 auto分别表示从不、始终和自动仅在输出到终端时启用颜色。 在grep命令中可以通过环境变量 GREP_COLORS 来定义高亮颜色以突出显示匹配项。下面是环境变量 GREP_COLORS 的几个字段的默认值和含义的示例 ms字段match start的默认值是01;31表示红色加粗。它用于突出显示匹配的起始位置。 mc字段match content的默认值是01;31表示红色加粗。它用于突出显示匹配的文本。 sl字段是选项从左边显示的颜色的字段。默认值为空表示没有颜色。如果设置为01;34表示蓝色加粗。 cx字段是选项从右边显示的颜色的字段。默认值为空表示没有颜色。如果设置为01;34表示蓝色加粗。 fn字段是文件名的颜色的字段。默认值是35表示紫色。如果设置为32表示绿色。 ln字段是行号的颜色的字段。默认值是32表示绿色。如果设置为31表示红色。 bn字段是列号的颜色的字段。默认值是32表示绿色。如果设置为31表示红色。 se字段是分隔符的颜色的字段。默认值是36表示青色。如果设置为35表示紫色。 示例在搜索结果中以红色高亮显示匹配项并始终启用颜色。 GREP_COLORSms01;31 grep --coloralways pattern file.txt 或 export GREP_COLORSms01;34:mc01;34:sl01;34:cx01;34:fn32:ln31:bn31:se35自动根据输出设备的默认值启用或禁用颜色。 grep --colorauto pattern file.txt-L 或 --files-without-match 功能仅输出未匹配的文件名。 示例查找当前目录及其子目录中不包含 ‘example’ 的所有 .txt 文件。 grep -Lr example ./*.txt-l 或 --files-with-matches 功能仅输出包含匹配内容的文件名。 示例查找当前目录及其子目录中包含 ‘example’ 的所有 .txt 文件。 grep -lr example ./*.txt[rootufo666 ~]# grep -rc AA *.txt 666.txt:0 data.txt:0 file1.txt:0 file.txt:0 output.txt:1[rootufo666 ~]# grep -rcl AA *.txt output.txt -m num 或 --max-countnum 功能匹配 num 行后停止读取文件。当与 -c 或 --count 一起使用时输出的匹配行计数不会大于 num。与 -v 或 --invert-match 一起使用时会输出 num 次匹配过程中的未匹配项。 示例在每个文件中最多显示前5个包含 ‘example’ 的行。 grep -m 5 example *.txt[rootufo666 ~]# cat file.txt 666 This is a word This is a word This is a word Another word here A sentence without the wordss[rootufo666 ~]# grep -m 1 is file.txt This is a word # 一行出现多次时只记录一次匹配 [rootufo666 ~]# grep -m 2 is file.txt This is a word This is a word # 取-v时-m 选项不再限制只会展示未匹配到的行 [rootufo666 ~]# grep -m 2 -v is file.txt Another word here A sentence without the wordss-o 或 --only-matching 功能打印行中匹配的内容部分非空。 示例只显示包含 ‘example’ 的部分。 grep -o example file.txt# 一行匹配到n次就输出n次。 [rootufo666 ~]# grep -m 1 -o is file.txt is is-q 或 --quiet 或 --silent 功能不进行标准输出。如果发现匹配项则立即退出并返回状态码0。即使存在执行错误也不会进行输出。 示例检查文件中是否包含 ‘example’并根据结果执行不同的操作。它会返回一个退出状态表示搜索是否成功。如果找到了至少一个匹配项那么退出状态为0这表示搜索成功否则失败。 if grep -q example file.txt; thenecho Pattern found in file.txt elseecho Pattern not found in file.txt fi-s 或 --no-messages 功能针对读取错误不进行标准错误输出。当搜索二进制文件或其他非文本文件时可能会出现读取错误。 示例在搜索当前目录及其子目录中的所有文件时忽略二进制文件的读取错误。 grep -rs example . --binary-fileswithout-match# 假设我们有一个名为binary_file.bin的二进制文件内容如下 0101010101010101 # 如果我们尝试在这个二进制文件上执行grep搜索而没有使用--binary-fileswithout-match选项会出现以下错误消息 grep: binary_file.bin: Binary file matches2.1.4 输出行前缀控制 以下是 grep 输出行前缀控制选项 -b 或 --byte-offset 功能这个选项会在每行匹配内容的前面打印字符偏移量。这对于查看文件中的具体位置非常有用。 示例 grep -b example file.txt# 显示文件中的隐藏字符偏移量包含隐藏换行符 [rootufo666 ~]# cat -A file.txt 666$ -- 4个 This is a word$ -- 15个 This is a word$ -- 15个 This is a word$ -- 15个 Another word here$ A sentence without the wordss$ [rootufo666 ~]# [rootufo666 ~]# grep -m 2 -b 6 file.txt 0:666 [rootufo666 ~]# grep -m 2 -b T file.txt 4:This is a word 19:This is a word -- 154 个 [rootufo666 ~]# grep -m 3 -b T file.txt 4:This is a word 19:This is a word -- 154 个 34:This is a word -- 15154 个-H 或 --with-filename: 功能当搜索多个文件时这个选项会确保在每个匹配行的前面都打印出文件名。这是grep的默认行为但在某些情况下如果你使用了其他可能改变此行为的选项如-h你可以使用-H来明确要求显示文件名。 示例 grep -H example file1.txt file2.txt# 默认输出带文件名 [rootufo666 ~]# grep word *.txt file1.txt:This is a word file1.txt:Another word here file1.txt:A sentence without the wordss file.txt:This is a word file.txt:This is a word file.txt:This is a word# 明确要求带文件名 [rootufo666 ~]# grep -H word *.txt file1.txt:This is a word file1.txt:Another word here file1.txt:A sentence without the wordss file.txt:This is a word file.txt:This is a word file.txt:This is a word# 明确不带文件名 [rootufo666 ~]# grep -h word *.txt This is a word Another word here A sentence without the wordss This is a word This is a word This is a word -h 或 --no-filename 功能这个选项在输出匹配行时不包含文件名。这对于查询单个文件或者不需要知道文件名的情况很有用。例如 grep -h pattern file.txt--labelLABEL 功能这个选项在输出匹配行时添加指定的标签。这对于区分不同输入源或者标记特定数据流很有用。例如 gzip -cd foo.gz | grep --labelfoo -H something# 只输出了 file1.txt 文件中的匹配情况 [rootufo666 ~]# grep --labelfile1.txt word file.txt file1.txt file1.txt:This is a word file1.txt:Another word here file1.txt:A sentence without the wordss注意--labelLABEL选项是GNU grep特有的并不是标准的grep命令选项。因此该选项在其他grep实现中可能不可用。 -n 或 --line-number 功能这个选项在输出匹配行时显示其在文件中的行号。这对于定位问题或者理解代码结构非常有帮助。例如 grep -n pattern file.txt[rootufo666 ~]# grep -n word file.txt 2:This is a word 3:This is a word 4:This is a word 5:Another word here 6:A sentence without the wordss-T 或 --initial-tab 功能这个选项在输出匹配行之前添加一个制表符tab作为对齐。这可以使得输出更加整齐和易读。例如 grep -T pattern file.txt请注意这些选项可以根据需要组合使用。例如如果你想在不显示文件名的同时显示匹配行的行号并且对齐输出你可以这样使用 grep -hTn pattern file.txt[rootufo666 ~]# grep -hTn word file.txt2 :This is a word3 :This is a word4 :This is a word5 :Another word here6 :A sentence without the wordss -u 或 --unix-byte-offsets 功能这个选项使得grep在报告字节偏移量时将文件视为Unix风格的文本文件即忽略文件中的回车CR字符。这对于在不同操作系统之间进行一致的文本处理非常有用。例如 grep -u -b pattern file.txt了解Windows系统上的文本文件使用CRLF回车换行作为换行符表示为\r\n。 在Windows上每行末尾会有回车符\r和换行符\n的组合用于表示换行。而在Unix/Linux系统上文本文件使用LF换行符作为换行符表示为\n 即 “$”。在这些系统上每行末尾只有一个换行符。当Linux系统遇到Windows风格的文本文件时它会将回车符CR视为普通字符并将其显示为^M 。 -Z 或 --null 功能这个选项使得grep在输出文件名时使用ASCII NUL字符\0代替通常的换行符。这在需要将grep的输出传递给其他命令如 xargs 并且文件名中可能包含特殊字符或空格时非常有用。例如 find . -type f -print0 | grep -Z pattern# .表示当前目录。这是 find 命令的起始点表示从当前目录开始搜索。 # -type f这是一个选项用于指定搜索的对象类型。-type f 表示只搜索普通文件。 # -print0这是一个选项用于输出搜索结果。 -print0 告诉 find 命令以 ASCII NUL 字符\0作为分隔符来输出文件名而不是使用换行符# grep -Z pattern 的输出结果如下 file 1.txt\0 file 2.txt\0在这个例子中find命令使用-print0选项以NUL字符分隔文件名然后grep使用-Z选项接受这种格式的输入。 请注意输出结果中不会显示 ASCII NUL 字符\0但实际上它们作为分隔符存在因此可以正确处理包含特殊字符或空格的文件名。 这些选项可以根据需要单独或组合使用。例如如果你想在报告Unix风格的字节偏移量的同时使用NULL字符分隔文件名你可以这样使用 grep -uZ -b pattern file.txt但是请注意-Z或–null选项主要影响文件名的输出而-u或–unix-byte-offsets选项影响的是匹配行的字节偏移量计算方式。这两个选项在功能上并不直接相关。 2.1.5 上下文控制 以下是 grep 上下文控制选项 -A num 或 --after-contextnum 功能这个选项使得grep在输出匹配行之后再打印num行。num不包含匹配行本身。例如 grep -A 1 pattern file.txt[rootufo666 ~]# grep -A 1 is file.txt This is a word This is a word This is a word -- 匹配的行 Another word here -- 再打印1行 -B num 或 --before-contextnum 功能这个选项使得grep在输出匹配行之前再打印num行。num不包含匹配行本身。例如 grep -B 1 pattern file.txt[rootufo666 ~]# grep -B 1 here file.txt This is a word -- 再打印1行 Another word here -- 匹配的行 -C num 或 --contextnum 功能这个选项使得grep在输出匹配行前后各打印num行。num不包含匹配行本身。例如 grep -C 1 pattern file.txt[rootufo666 ~]# grep -C 1 here file.txt This is a word -- 之前再打印1行 Another word here -- 匹配的行 A sentence without the wordss -- 之后再打印1行--group-separatorstring 功能这个选项允许你在使用-A、-B或-C参数时自定义分隔匹配上下文的字符串默认是--。例如 grep -C 1 --group-separator*** pattern file.txt# 多次行匹配时输出的结果用 *** 分割 [rootufo666 ~]# grep -C 1 --group-separator*** here file.txt This is a word Another word here A sentence without the wordss *** This is a word Another word here A sentence without the wordss--no-group-separator 功能这个选项使得grep在输出匹配行的上下文时不使用任何分隔符。例如 # 明确指定不使用任何分隔符在每次匹配输出结果之间 grep -C 1 --no-group-separator pattern file.txt这将在匹配行与其上下文之间不使用任何分隔符。 2.1.6 文件和目录的选择 以下是 grep 文件和目录相关选项 -a 或 --text 这个选项使得grep将所有文件包括二进制文件视为文本文件进行处理。等效于--binary-filestext。例如 grep -a pattern file.bin在默认情况下grep会识别出二进制文件并避免尝试解析它们的内容以防止输出乱码或者由于二进制数据中的特殊字符导致的错误。但是当使用-a选项时grep会忽略文件的类型强制将其内容作为文本进行处理。 # -a选项强制grep将二进制文件视为文本文件处理。 # -P选项启用Perl兼容正则表达式PCRE这样我们可以使用\xHH形式来表示十六进制字节。 grep -a -P \x48\x65\x6c\x6c\x6f binary_file.bin--binary-filestype 这个选项允许你指定如何处理二进制文件。例如 binary默认如果二进制文件与模式不匹配grep会给出提示。without-match不匹配的二进制文件将被忽略等效于使用-I参数。textgrep会尝试将二进制文件作为文本文件处理但可能会输出不友好的内容因为二进制数据中的某些字节可能在ASCII字符集中没有对应的含义。 grep --binary-fileswithout-match pattern *-D action 或 --devicesaction 这个选项允许你指定如何处理设备、套接字或特殊文件。例如 read默认如果不使用-R或-r选项grep会尝试读取设备、套接字或特殊文件的内容。skipgrep会跳过这些文件不进行任何处理。 grep -D skip pattern /dev/sda根据需求可以选择默认的行为尝试读取内容或者跳过这些文件以避免可能的错误或不必要的操作。在处理可能包含特殊文件的目录时使用skip动作可以提高grep的稳定性和效率。 -d action 或 --directoriesaction 这个选项允许你指定如何处理目录。例如 read默认grep会将目录视为常规文件处理这在某些操作系统或文件系统上可能会导致错误。skipgrep会跳过这些目录不搜索其中的文件。recursegrep会递归地搜索目录中的文件等效于使用-r或-R选项。 [rootufo666 ~]# grep mysql mysql-8.0.35 grep: mysql-8.0.35: Is a directory [rootufo666 ~]# grep -d read mysql mysql-8.0.35 grep: mysql-8.0.35: Is a directory [rootufo666 ~]# [rootufo666 ~]# grep -d skip mysql mysql-8.0.35 [rootufo666 ~]# --excludeglob 这个选项允许你跳过与glob模式匹配的文件名。glob模式可以包含通配符*、?、[…]等并可以使用\进行转义。可以匹配很多文件或所有文件但是又同时排除一些文件例如 grep --exclude*.log pattern *--exclude-fromfile 这个选项允许你通过一个文件指定多个要排除的glob模式。例如 grep --exclude-fromexcludes.txt pattern *--exclude-dirdir 这个选项在递归搜索时允许你排除与dir匹配的目录。递归搜索的同时可以排除一些目录例如 grep --exclude-dir.git -r pattern .-I 这个选项使得grep在处理二进制文件时不进行匹配等效于--binary-fileswithout-match。不进行二进制文件例如 grep -I pattern *--includeglob 这个选项只处理与glob模式匹配的文件规则与--exclude相反。匹配一个范围内的部分文件例如 grep --include*.txt pattern *-r 或 --recursive 这个选项使得grep递归地搜索指定目录及其子目录中的文件并进行匹配。匹配一个指定目录等效于–directoriesrecurse。但是这个选项不会跟随符号链接进入其他目录也不会处理符号链接指向的文件。例如 grep -r pattern directory/-R 或 --dereferencerecursive 这个选项与-r类似也使得grep递归地搜索指定目录及其子目录中的文件并进行匹配。但是这个选项会跟随符号链接进入其他目录并处理符号链接指向的文件。例如 grep -R pattern directory/简而言之-r或--recursive选项在递归搜索时不处理符号链接指向的目录或文件而-R或--dereferencerecursive选项则会跟随符号链接并处理它们指向的目录或文件。 2.1.7 其他选项 --line-buffered 这个选项使得grep在输出时使用行缓冲这意味着每匹配到一行就会立即刷新输出。这可能会导致性能问题但可以避免输出内容的混合或混乱一般不使用。例如 grep --line-buffered pattern file.txt--mmap 这个选项已经被放弃使用不再推荐。它曾经用于尝试通过内存映射文件来提高搜索性能但现在grep默认的行为已经足够高效。 -U 或 --binary 这个选项告诉grep以二进制方式处理输入文件。例如 在MS-DOS和Windows平台上的文件默认情况下grep会尝试识别文件是文本还是二进制并根据–binary-files选项来决定如何处理它们。如果grep认为文件是文本它会去除文件原始内容中的CR字符以确保^和$等锚定符号能够正常工作。 然而这种默认行为可能会导致问题特别是在处理以CR/LF结尾的文本文件时。某些正则表达式可能由于行尾的CR字符被去除而无法正确匹配。使用-U或--binary选项grep会以二进制方式处理输入文件不对文件内容进行任何特定于文本的处理。 grep -U pattern file.bin-u 或 --unix-byte-offsets 与 -U 或 --binary 的区别 -u 或 --unix-byte-offsets这个选项告诉grep在输出中使用Unix风格的字节偏移量。这意味着偏移量不会计入文件中的CR字符回车\r。这个选项主要在处理从MS-DOS或Windows系统迁移过来的文件时有用因为在这些系统中行尾通常是CRLF回车和换行组合而在Unix系统中行尾通常是LF换行。 -U 或 --binary这个选项告诉grep以二进制方式处理输入文件。默认情况下在MS-DOS和Windows平台上grep会根据--binary-files选项来判断文件是文本还是二进制。如果grep认为文件是文本它会去除文件原始内容中的CR字符以确保^和$正常工作。但是如果文本文件行以CR/LF结尾这可能导致某些正则表达式匹配失败。使用-U选项grep会以二进制方式处理输入文件不对文件内容进行任何特定于文本的处理。 所以-u或--unix-byte-offsets影响的是grep输出中显示的字节偏移量的计算方式而-U或--binary影响的是grep如何解析和处理输入文件的内容。 -z 或 --null-data 这个选项告诉grep将输入内容视为由ASCII NUL字符\0分隔的行集合而不是依赖于换行符。这样可以确保在处理包含特殊字符或者合并多个文件内容时grep能够正确地识别和匹配行。例如 grep -z pattern file1.txt file2.txt在这个例子中grep会将file1.txt和file2.txt的内容视为一个由NUL字符分隔的行集合并搜索其中包含pattern的行。 -z 或 --null-data 与 -Z 或 --null 的区别 -z 或 --null-data这个选项告诉grep将输入内容视为由ASCII NUL字符\0分隔的行集合。这在处理包含不可见字符如换行符的文件或者需要将多个文件的内容合并为一个流的情况非常有用。 -Z 或 --null这个选项的作用是在输出匹配的行时在每行的末尾添加一个NUL字符而不是默认的换行符。这在与其他工具如xargs配合使用时非常有用因为这些工具通常可以处理以NUL字符分隔的输入。 所以-z或--null-data影响的是grep如何解析输入数据而-Z或--null影响的是grep输出的结果格式。 2.2 环境变量 grep命令本身并没有特定的环境变量。然而它可能受到一些通用环境变量的影响例如 LC_ALL、LC_CTYPE、LANG: 这些环境变量影响文本的字符分类和排序规则从而可能影响grep的行为特别是在处理多语言或特殊字符时。 GREP_OPTIONS: 这个环境变量在旧版本的grep中被用来设置默认的grep选项。然而由于安全原因现代版本的grep如GNU grep 2.22及更高版本已经废弃了这个环境变量建议直接在命令行中指定选项。 环境变量LC_ALL、LC_CTYPE 和 LANG 默认值的设定取决于你的操作系统和系统的区域设置。这些环境变量用于定义locale本地化影响文本的字符分类、排序规则、日期和时间格式、货币符号等。 以下是一些示例 默认值在许多Linux系统中如果你没有明确设置这些环境变量它们可能会继承系统的默认值。例如 echo $LANG # 输出可能类似en_US.UTF-8 或者 Cecho $LC_ALL # 如果未显式设置可能为空echo $LC_CTYPE # 如果未显式设置可能与$LANG相同或者为空设置变量如果你想改变这些环境变量的值你可以在shell配置文件中如.bashrc或.bash_profile进行设置然后重新加载配置文件或打开一个新的shell会话 export LANGfr_FR.UTF-8 export LC_ALLfr_FR.UTF-8 export LC_CTYPEfr_FR.UTF-8在这个例子中我们设置了这些环境变量为法语法国的UTF-8编码。这将影响grep以及其他命令如何处理文本包括字符分类、排序和特殊字符。 对于grep来说这些环境变量的影响主要体现在如何识别和处理文本中的字符。例如如果你正在搜索包含某些特殊字符或多语言文本的文件正确的locale设置可以确保grep能够正确地匹配和显示这些字符。 2.3 退出状态 grep命令的退出状态表示其执行结果通常有以下几种情况 0 (成功)当grep找到匹配的模式时它会返回退出状态0表示命令执行成功。1 (没有匹配)当grep在输入中找不到匹配的模式时它会返回退出状态1表示命令执行失败在这种情况下失败意味着没有找到匹配。2 (错误)如果grep遇到错误如无法打开文件、无效的选项或正则表达式错误等它会返回退出状态2。 在Shell脚本中可以使用特殊变量$?来获取上一条命令在这里是grep的退出状态 bash grep pattern file.txt exit_status$? if [ $exit_status -eq 0 ]; thenecho Pattern found. elif [ $exit_status -eq 1 ]; thenecho Pattern not found. elseecho An error occurred. fi请注意不同的grep实现可能会有不同的退出状态代码约定但上述情况适用于大多数Unix和Linux系统中的grep包括GNU grep。 2.4 grep 匹配规则 以下是 grep命令的匹配规则相关选项。 1.默认匹配规则 如果没有指定任何匹配规则选项如-G、-E、-F或-Pgrep 默认使用基本正则表达式BRE进行匹配。 示例 grep pattern file.txt这将搜索file.txt中的包含pattern的行。 2.-G 或 --basic-regexp 这是默认的匹配规则表示使用 基本正则表达式BRE 进行匹配。 示例 grep -G patt?rn file.txt这将搜索file.txt中的包含patt?rn其中 “?” 代表单个字符的行。 3.-E 或 --extended-regexp 使用 扩展正则表达式ERE 进行匹配。扩展正则表达式支持更多的元字符和更灵活的语法。 示例 grep -E patt[ern] file.txt这将搜索file.txt中的包含patt[ern]其中 “[” 和 “]” 定义了一个字符类的行。 4.-F 或 --fixed-strings 将匹配规则视为一个固定字符串列表不进行正则表达式匹配在搜索大文件时效率非常高。 示例 grep -F pattern file.txt这将搜索file.txt中的包含精确字符串pattern的行。 5.-P 或 --perl-regexp 使用Perl兼容的正则表达式PCRE进行匹配。这个选项提供了更多高级的正则表达式功能。 示例 grep -P (?i)pattern file.txt这将搜索file.txt中的包含pattern忽略大小写的行使用了Perl正则表达式的(?i)标志来启用忽略大小写的功能。 6.egrep 和 fgrep 这两个程序分别等效于grep -E和grep -F。 示例 egrep patt[ern] file.txtfgrep pattern file.txt比较惊喜的是当匹配文件比较大时fgrep 执行效率非常高。例如50M 的文件fgrep 命令不到 1 秒grep 则需要 10 多分钟。 7.关于输入文件和递归选项 如果输入文件为-表示使用标准输入作为输入内容。如果未指定输入文件且命令行中有其他参数那么这些参数被视为要搜索的标准输入内容。如果指定了递归选项如-r或-Rgrep会在指定的目录及其子目录中递归搜索匹配的文件。如果未指定输入文件且没有递归选项grep会搜索当前工作目录.中的文件。如果同时指定了多个文件grep会搜索所有指定的文件。 3. 正则表达式 正则表达式是一种强大的工具用于描述和匹配字符模式。它类似于数学公式通过使用各种运算符、元字符和构造规则来组合简单的表达式形成复杂的匹配规则。 grep命令支持三种正则表达式语法 基本正则表达式BRE这是最基础的正则表达式形式功能相对有限。在GNU版本的grep中基本正则表达式和扩展正则表达式在功能上没有太大区别。 扩展正则表达式ERE扩展正则表达式提供了比基本正则表达式更强大的功能和更灵活的语法。例如ERE允许使用圆括号进行分组和捕获以及使用|(管道)符号表示或操作。 Perl正则表达式PCREPerl正则表达式是功能最强大、最灵活的正则表达式形式提供了许多额外的功能和高级特性。这些特性可能不适用于所有系统具体请参考pcresyntax手册文档。 在实践中选择哪种正则表达式语法取决于你的需求和所使用的工具。对于简单的匹配任务基本正则表达式可能就足够了。而对于更复杂和灵活的匹配需求扩展正则表达式和Perl正则表达式提供了更多的选项和能力。 需要注意的是不同的系统和工具可能对正则表达式的支持程度不同因此在编写跨平台的脚本或程序时应考虑到这些差异。 3.1 基本结构 正则表达式是由匹配字符的模式构成的可以用于匹配文本中的各种字符和字符串。以下是一些正则表达式元字符和结构 字符匹配大多数字符在正则表达式中直接匹配自身包括字母、数字和其他符号。 特殊字符转义如果想要匹配具有特殊含义的元字符如.、?、*等需要在其前面放置一个反斜杠\进行转义。 基本正则表达式BRE元字符包括 .匹配任意单个字符除了换行符。 *匹配前面的字符0次或多次。 [...]字符类匹配其中的任何一个字符。 [^...]否定字符类匹配不在其中的任何一个字符。 \转义字符用于去除后面字符的特殊含义或者匹配一些特殊字符。 扩展正则表达式ERE元字符在BRE的基础上增加了一些包括 ?匹配前面的字符0次或1次。 匹配前面的字符1次或多次。 {m,n}匹配前面的字符至少m次至多n次。 |alternation匹配左边或右边的表达式。 ( )分组将多个字符视为一个整体进行匹配并可以用于反向引用。 \n反向引用引用之前定义的第n个子表达式匹配的内容。 ^在字符串开始处匹配。 $在字符串结束处匹配。 正则表达式的组合多个正则表达式可以连接在一起结果是匹配各自正则表达式的并集。使用|操作符可以在两个正则表达式之间表示或操作。 优先级和分组重复操作如*、、?、{}的优先级高于串接操作。反向引用又优先于交替操作。为了覆盖这些复杂的优先级规则可以使用括号将一整个模式括起来形成子模式。子模式可以通过反向引用号\nn为子模式的编号来引用。 说明 重复操作如*、、?、{}的优先级高于串接操作这意味着在解析正则表达式时重复操作会先于串接操作进行计算。例如在表达式abc中由于 * 的优先级高于 所以它会被解析为(ab)c即匹配任意数量的a后面跟着一个c。反向引用又优先于交替操作反向引用是指在正则表达式中使用\nn为子模式的编号来引用之前已经定义过的子模式。当存在反向引用和交替操作如 | 时反向引用的优先级更高。例如在表达式(a)b\1|c中\1是一个反向引用它优先于|运算符所以这个表达式被解析为((a)b\1)|c即匹配要么是abab要么是c。为了覆盖这些复杂的优先级规则可以使用括号将一整个模式括起来形成子模式通过在需要改变优先级的表达式周围添加括号可以强制改变运算的顺序。例如在表达式abc中如果不希望优先于可以写成(ab)*c这样就变成了先匹配一个或多个a“b”然后跟一个c。子模式可以通过反向引用号\nn为子模式的编号来引用在正则表达式中每个用括号括起来的子模式都会被分配一个编号从左到右第一个子模式的编号为1第二个为2以此类推。这些编号可以用在后面的表达式中通过\n来进行引用。例如在表达式(a(b)c)\2中\2引用的是第二个子模式即b所以这个表达式匹配的是abc其中b被重复了一次。 基本正则表达式BRE和扩展正则表达式ERE的主要区别有哪些 元字符的不同 基本正则表达式通常不支持匹配前面的字符1次或多次、?匹配前面的字符0次或1次和{m,n}匹配前面的字符至少m次至多n次这些量词。扩展正则表达式支持上述的、?和{m,n}量词。   alternation分支选择的不同 基本正则表达式使用\|进行分支选择例如a\|b匹配a或b。扩展正则表达式使用|进行分支选择例如a|b匹配a或b。   分组和捕获的不同 基本正则表达式使用\(和\)进行分组但不支持捕获和反向引用。扩展正则表达式也使用(和)进行分组并且支持捕获和反向引用。可以通过\n引用之前定义的第n个子表达式的匹配内容。   字符类的不同 基本正则表达式和扩展正则表达式都支持 [...] 和 [^...] 字符类但在某些实现中扩展正则表达式可能支持更多的预定义字符类或者自定义字符类范围。   开始和结束锚定的不同 在某些实现中基本正则表达式可能需要使用 \ 进行转义如 ^\ 表示字符串开始$\ 表示字符串结束。扩展正则表达式通常可以直接使用 ^ 表示字符串开始$ 表示字符串结束。   转义字符的不同 基本正则表达式中的某些元字符如.、*、?等在使用时通常需要进行转义。扩展正则表达式中的一些元字符可能不需要转义但具体情况取决于具体实现。 3.2 字符集和括号表达式不常用 在正则表达式中可以使用特定的字符类来匹配特定类型的字符。以下是一些常见的字符类及其含义 为获得传统shell通配符如*、?的行为需要将环境变量LC_ALL设置为C。 [...]括号表示一个字符列表其中可以包含单个字符或范围。例如 [:alnum:]匹配任意字母数字字符等同于[0-9A-Za-z]。 [:alpha:]匹配任意字母字符等同于[A-Za-z]。 [:blank:]匹配空格和制表符。 [:cntrl:]匹配控制字符ASCII值000到037和177del。 [:digit:]匹配0到9的数字。 [:graph:]匹配可打印字符包括字母数字和标点符号等同于[!-~]。 [:lower:]匹配小写字母。 [:print:]匹配可打印字符包括字母数字、标点符号和空格。 [:punct:]匹配标点符号! # $ % ’ ( ) * , - . / : ; ? [ \ ] ^ _ ‘ { | } ~。 [:space:]匹配空白字符包括空格、制表符、换页符等。 [:upper:]匹配大写字母。 [:xdigit:]匹配十六进制数字0-9、A-F、a-f。 在字符列表中特殊字符需要进行转义例如要匹配字符]应写为\]。如果要在列表中使用-作为字符应将其放在第一位或最后一位否则它会被解释为范围符号。 正则表达式中的其他特殊字符和符号 .匹配任意单个字符除换行符外。 ^在字符列表中表示字符不在列表中在字符串开始处表示匹配行的开始。 $在字符串结束处表示匹配行的结束。 类别元字符不常用 [:开启类别字符。 :]关闭类别字符。 排序符号不常用 [.打开排序符号。 .]关闭排序符号。 等价类不常用 [打开等价类。 ]关闭等价类。 通过熟练使用这些字符类和特殊符号可以更精确地构造正则表达式来匹配各种文本模式。需要注意的是不同的编程语言和工具可能对正则表达式的语法支持程度略有不同。 3.3 反斜杠字符和特殊表达式不常用 在正则表达式中反斜线\字符通常用于转义特殊字符或表示特定的特殊表达式。以下是一些常见的反斜线字符和特殊表达式 \b匹配一个单词边界即位于单词与空格、标点符号或其他非单词字符之间的位置。 \B匹配一个非单词边界即不位于单词与空格、标点符号或其他非单词字符之间的位置。 \ 和 \在某些正则表达式实现中如Perl和PCRE这两个表达式分别匹配单词的开始和结束位置。 \w匹配任何字母数字字符或下划线等同于[a-zA-Z0-9_]。 \W匹配任何非字母数字字符和非下划线等同于[^a-zA-Z0-9_]。 \s匹配任何空白字符包括空格、制表符、换页符等。 \S匹配任何非空白字符。 这些特殊表达式在构建复杂的正则表达式时非常有用可以更精确地定位和匹配文本中的模式。需要注意的是不同的编程语言和工具可能对正则表达式的语法支持程度略有不同。 3.4 锚位 ^用于匹配字符串的起始位置。例如正则表达式^abc会匹配以abc开头的字符串。$用于匹配字符串的结束位置。例如正则表达式xyz$会匹配以xyz结尾的字符串。 3.5 反向引用和子表达式 反向引用\nn为一个数字允许你引用之前定义的第n个子表达式匹配的内容。例如正则表达式(a)\1会匹配连续的两个a字符。如果反向引用未匹配到任何内容那么整个匹配可能会失败。例如在表达式a(.)|b\1中如果尝试匹配ba由于\1未能匹配到任何内容所以整个匹配失败。处理多个表达式和子表达式   使用-e选项可以指定多个正则表达式。例如grep -e abc -e def file.txt会搜索包含abc或def的行。   使用-f file选项可以从文件中读取多个正则表达式。文件中的每一行都被视为一个独立的正则表达式。 3.6 基本正则与扩展正则使用原则 基本正则表达式和扩展正则表达式在语法和元字符的使用上存在一些区别3.1 基本结构 也做了补充 在基本正则表达式BRE中某些元字符如?, , {, |, (, and )失去了它们的原来含义通常需要加上反斜线\?, \, \{, \|, \(, and \)来进行转义以便它们能够被解释为元字符。 传统的egrep等价于grep -E在某些实现中可能不支持直接使用{}作为量词。因此为了可移植性建议在grep -E模式中避免使用{}。可以使用 [{}] 来匹配字面意义上的大括号 {}。 为了确保脚本在不同系统和版本的grep工具上都能正确运行建议在编写脚本时遵循以下原则 如果只需要基本的正则表达式功能使用基本正则表达式语法并适当转义元字符。如果需要使用扩展正则表达式的功能使用grep -E或egrep命令并注意元字符的使用和可移植性问题。对于可能引起兼容性问题的特殊字符或构造如{}尽量使用可移植的替代方案如 [{}]。 通过遵循这些原则可以提高脚本的兼容性和可靠性使其在不同的环境中都能正常工作。 4. 用法总结 以下是一些基本和常用的grep命令示例这些示例应该能够覆盖大部分常见的grep应用场景。 搜索包含特定字符串的文件grep string file.txt在多个文件中搜索字符串grep string file1.txt file2.txt file3.txt使用反向引用搜索grep -e regex1 -e regex2 files*忽略大小写搜索grep -i string file.txt只显示匹配行的行号grep -n string file.txt只显示文件名grep -l string file.txt只显示不包含匹配行的文件名grep -L string file.txt显示匹配行的上下文前两行和后两行grep -C 2 string file.txt使用固定字符串搜索grep -F string file.txt使用Perl兼容正则表达式grep -P regex file.txt递归搜索目录grep -r string /path/to/directory只在文本文件中搜索grep -I string /path/to/directory排除特定文件或目录grep -r --exclude*.log string /path/to/directory使用文件包含匹配模式grep -f pattern_file.txt input_files*搜索以特定字符开始的行grep ^string file.txt搜索以特定字符结束的行grep string$ file.txt使用OR操作符搜索grep -E string1|string2 file.txt匹配单词边界grep \bstring\b file.txt匹配空行grep ^$ file.txt匹配空白行grep ^[[:space:]]*$ file.txt匹配数字grep [0-9] file.txt匹配字母grep [a-zA-Z] file.txt匹配换行符grep $\n file.txt匹配制表符grep $\t file.txt匹配多个连续的相同字符grep string file.txt匹配一个或多个字符grep string file.txt匹配零个或多个字符grep s*t*ring file.txt匹配前面的字符出现一次或多次grep string file.txt匹配前面的字符出现零次或一次grep str?ing file.txt使用括号进行分组和捕获grep (s)t(r)ing file.txt使用量词匹配特定次数的字符grep str{3}ing file.txt使用量词匹配范围内的字符次数grep str{2,4}ing file.txt使用括号指定选项grep --colorauto string file.txt在标准输入中搜索echo text | grep string在多个文件中搜索并输出文件名和匹配行grep -H string file1.txt file2.txt查找不含某个字符串的行grep -v string file.txt使用扩展正则表达式grep -E regex file.txt查找只包含某个字符串的行grep -x string file.txt使用八进制转义字符grep $\041 file.txt 匹配感叹号使用十六进制转义字符grep $\x21 file.txt 匹配感叹号查找以某个字符串开头的文件find . -type f -exec grep -q string {} \; -print查找以某个字符串结尾的文件find . -type f -exec grep -q string$ {} \; -print使用颜色高亮匹配grep --color string file.txt在多个文件中搜索并统计每个文件中的匹配次数grep -c string file1.txt file2.txt在多个文件中搜索并统计所有文件中的总匹配次数grep -rc string file1.txt file2.txt使用固定的行数上下文grep -C 3 string file.txt使用可变的行数上下文grep -C $(expr $(wc -l file.txt) / 2) string file.txt使用地址范围进行搜索sed -n /start/,/end/p file.txt | grep string查找包含两个连续单词的行grep -E word1.*word2 file.txt查找不包含两个连续单词的行grep -Ev word1.*word2 file.txt 至此所有的 grep 命令已经介绍完。