Linux 行合并

简介

Linux 操作系统提供了强大的文本处理工具，让你能够高效地处理和合并多个文件中的数据。paste 命令就是这样一种工具，它可以将不同文件的行并排合并。这种合并不同来源数据的能力对于数据分析、配置管理和报告生成至关重要。

在这个实验中，你将学习如何使用 paste 命令以各种方式合并不同文件的行。你将探索该命令的基本功能，学习自定义合并列之间的分隔符，并了解如何按顺序处理文件。这些技能是在 Linux 环境中进行有效数据处理的基础。

Skills Graph

paste 命令的基本用法

Linux 中的 paste 命令用于水平合并（并行合并）多个文件的行。当你需要合并存储在不同文件中的相关数据时，这个命令特别有用。

首先，让我们导航到要执行所有操作的项目目录：

cd ~/project

现在，我们需要创建一些示例文件来演示 paste 命令。首先，创建一个包含温度数据的文件：

echo "Temperature" > temperatures.txt

此命令使用 echo 将单词 "Temperature" 写入名为 temperatures.txt 的文件。> 符号将 echo 命令的输出重定向到文件，如果文件不存在则创建它，如果存在则覆盖它。

接下来，创建另一个包含各种大气条件的文件：

echo -e "Pressure\nHumidity\nWind_Speed" > conditions.txt

在这个命令中，我们在 echo 中使用 -e 选项来解释反斜杠转义符。\n 表示换行符，因此这个命令创建了一个包含三行的文件："Pressure"、"Humidity" 和 "Wind_Speed"。

让我们检查这两个文件的内容，以确认它们已正确创建：

cat temperatures.txt

输出应该如下：

Temperature

现在检查条件文件：

cat conditions.txt

输出应该如下：

Pressure
Humidity
Wind_Speed

现在文件已准备好，让我们使用 paste 命令将它们并排合并：

paste temperatures.txt conditions.txt

输出应该如下：

Temperature      Pressure
                Humidity
                Wind_Speed

注意，paste 命令逐行合并文件，在每行中将 temperatures.txt 的内容放在 conditions.txt 的内容之前。制表符用作列之间的默认分隔符。

由于 temperatures.txt 只有一行，conditions.txt 中剩余的行在 temperatures.txt 内容所在的位置显示为空。

paste 的这种基本用法展示了你如何水平合并不同文件中的数据，这对于从单独的列文件创建表格数据非常有用。

使用 paste 命令指定自定义分隔符

默认情况下，paste 命令使用制表符作为合并列之间的分隔符。不过，你可以使用 -d 选项指定不同的分隔符，这对于创建 CSV 文件、自定义格式的数据或为其他工具准备数据非常有用。

让我们创建一个包含日期信息的新文件，以演示如何使用自定义分隔符：

echo -e "Date\n2023-04-01\n2023-04-02\n2023-04-03" > dates.txt

这将创建一个包含四行的文件：标题 "Date" 和三个日期。

让我们检查这个新文件的内容：

cat dates.txt

你应该会看到：

Date
2023-04-01
2023-04-02
2023-04-03

现在，让我们使用逗号而不是默认的制表符作为分隔符来合并这三个文件：

paste -d ',' temperatures.txt conditions.txt dates.txt

-d 选项后面跟着一个逗号，表示我们希望使用逗号作为列之间的分隔符。该命令将把三个文件并排合并，并用逗号分隔每个文件中的值。

输出应该如下所示：

Temperature,Pressure,Date
,Humidity,2023-04-01
,Wind_Speed,2023-04-02
,,2023-04-03

注意，第 2 - 4 行的第一列有空值，因为 temperatures.txt 只有一行。同样，第 4 行的第二列有空值，因为 conditions.txt 只有三行。

你可以使用任何字符作为分隔符。例如，让我们尝试使用冒号：

paste -d ':' temperatures.txt conditions.txt dates.txt

输出应该是：

Temperature:Pressure:Date
:Humidity:2023-04-01
:Wind_Speed:2023-04-02
::2023-04-03

这种选择分隔符的灵活性使 paste 命令成为一个多功能工具，可用于格式化数据以满足特定需求，例如为导入数据库或电子表格准备数据。

使用 paste 命令进行串行合并

到目前为止，我们已经使用 paste 命令水平合并文件，将不同文件的内容并排排列。不过，paste 还可以使用 -s 选项对文件进行串行合并（一个接一个）。当你想将文件的多行内容合并为一行，或者想分别处理每个文件时，这种方法很有用。

让我们使用之前创建的文件来演示串行合并：

paste -s temperatures.txt

-s 选项告诉 paste 在处理下一个文件之前，先对每个文件内的行进行串行合并。由于 temperatures.txt 只有一行，输出可能看起来没有变化：

Temperature

让我们试试有多行内容的 conditions.txt 文件：

paste -s conditions.txt

输出应该如下所示：

Pressure        Humidity        Wind_Speed

注意，conditions.txt 中的所有行都已合并为一行，值之间用制表符分隔。这与 paste 的默认行为不同，默认行为是合并不同文件的行。

你还可以将 -d 选项与 -s 一起使用，为串行合并指定自定义分隔符：

paste -s -d ',' conditions.txt

输出应该是：

Pressure,Humidity,Wind_Speed

当你向 paste -s 提供多个文件时，它会分别处理每个文件，为每个文件生成单独的输出行：

paste -s temperatures.txt conditions.txt dates.txt

输出应该是：

Temperature
Pressure        Humidity        Wind_Speed
Date    2023-04-01      2023-04-02      2023-04-03

如你所见，第一行是 temperatures.txt 的合并内容（只有一行），第二行是 conditions.txt 的合并内容，第三行是 dates.txt 的合并内容。

你还可以结合使用 -s 和 -d 选项，为每个文件指定不同的分隔符。例如：

paste -s -d ',:\n' temperatures.txt conditions.txt dates.txt

-d ',:\n' 选项指定了三个分隔符：第一个文件使用逗号，第二个文件使用冒号，第三个文件使用换行符（只是移到下一行）。输出应该是：

Temperature
Pressure:Humidity:Wind_Speed
Date    2023-04-01      2023-04-02      2023-04-03

使用 paste 进行串行合并是一个强大的功能，它可以改变数据的布局，使其适合不同的处理需求。

总结

在本次实验中，你学习了如何在 Linux 系统中使用 paste 命令以不同方式合并多个文件的行：

1. paste 的基本用法，即使用默认的制表符分隔符水平合并文件
2. 在合并文件时使用 -d 选项指定自定义分隔符
3. 使用 -s 选项进行串行合并，以合并文件内的行

这些技能是在 Linux 环境中进行数据处理和文本操作的基础。paste 命令在以下场景中特别有用：

• 从单独的列文件创建表格数据
• 格式化数据以导入数据库或电子表格
• 将数据从垂直布局转换为水平布局，反之亦然
• 为使用其他 Linux 命令进行进一步处理准备数据

通过掌握 paste 命令，你为自己的 Linux 命令行工具集增添了一个强大的工具，它将帮助你高效地操作和处理文本数据。