Linux Shell 管道基本介绍
Linux Shell 管道是一种强大的功能，它允许用户将多个命令链接在一起，使得一个命令的输出可以作为另一个命令的输入。这种机制可以极大地提高命令行操作的效率和灵活性。本文将详细介绍 Linux Shell 管道的工作原理、常用的管道命令和一些实用的管道示例。
管道的工作原理
在 Linux Shell 中，管道是通过符号 | 来表示的。当你在两个命令之间使用管道符号时，Shell 会创建一个管道，并将第一个命令的标准输出连接到第二个命令的标准输入。这意味着第一个命令的输出将直接传递给第二个命令作为其输入。
例如，以下命令使用 grep 命令从 ls 命令的输出中筛选出包含 “txt” 的行：
ls | grep "txt"
在这个例子中，ls 命令的输出（即当前目录中的文件列表）被传递给 grep 命令，后者仅输出包含 “txt” 的行。
常用的管道命令
以下是一些常用的与管道结合使用的命令：
grep：搜索文本并输出匹配的行。sort：对输入的行进行排序。uniq：从输入中删除重复的行。wc：统计行数、单词数或字符数。awk：强大的文本处理工具，用于模式扫描和处理。sed：流编辑器，用于对文本进行过滤和转换。
实用的管道示例
-
搜索特定文件并计数：使用
find命令查找所有扩展名为 “.txt” 的文件，并使用wc -l命令计算找到的文件数量。find . -name "*.txt" | wc -l -
排序并删除重复行：对文件的内容进行排序，并使用
uniq命令删除重复的行。sort myfile.txt | uniq -
统计文件中单词出现的次数：使用
grep命令查找文件中单词 “the” 出现的次数。grep -o "the" myfile.txt | wc -l -
提取特定列并排序：使用
awk命令从文本文件中提取第二列，并使用sort命令对结果进行排序。awk '{print $2}' myfile.txt | sort -
组合多个管道：结合使用多个管道来实现复杂的文本处理。例如，查找包含 “error” 的日志行，然后提取第三列，并对结果进行去重和排序。
grep "error" logfile.txt | awk '{print $3}' | sort | uniq
管道和函数的组合使用
管道不仅可以与命令结合使用，还可以与 Shell 函数结合使用，从而进一步扩展其功能和灵活性。在 Shell 中，函数允许你将一组命令封装成一个单独的实体，这些命令可以接受输入并产生输出，就像普通的 Shell 命令一样。当你将函数与管道结合使用时，你可以将函数的输出传递给另一个命令或函数，或者接受来自另一个命令的输入。
定义和使用函数
在 Shell 脚本或命令行中定义函数的基本语法如下：
function_name () {
# 命令序列
}
定义函数后，你可以通过其名称来调用它，就像调用任何其他命令一样。如果你想让函数接受来自管道的输入，可以在函数体内使用 read 命令来读取标准输入。
示例：使用管道和函数过滤和处理数据
假设你有一个函数，用于从其输入中过滤出特定的数据行：
filter_data () {
while read line; do
echo "$line" | grep "特定模式"
done
}
你可以将一个命令的输出通过管道传递给这个函数，然后将函数的输出传递给另一个命令。例如，从文件中筛选出包含 “特定模式” 的行，并对这些行进行排序：
cat myfile.txt | filter_data | sort
在这个示例中，cat 命令的输出被传递给 filter_data 函数。这个函数读取每一行输入，并使用 grep 命令筛选出包含 “特定模式” 的行。然后，筛选出的行被传递给 sort 命令进行排序。
使用函数和管道进行高级文本处理
结合使用函数和管道可以极大地增强文本处理的能力。例如，你可以创建一个函数来转换数据格式，另一个函数来进行数据过滤，然后通过管道将它们链接起来，以实现复杂的数据处理流程。
convert_format () {
# 将输入数据转换为另一种格式
}
filter_data () {
# 过滤输入数据
}
cat rawdata.txt | convert_format | filter_data | sort
这种方法允许你以模块化的方式构建复杂的数据处理命令，使得每个部分都容易理解和维护。
自定义的函数使用管道方式
管道|的实质是文件流的输入和输出，和函数出入参无关。自定义的函数使用管道方式如下代码:
function func1(){
echo "$1-Func1";
}
function func2(){
read line;
echo "$line-Func2";
}
调用func1 Hello | func2，实际输出为Hello-Func1-Func2
