bash使用“读时”读取多个文件

Question

当我有一个文本文件要使用bash逐行读取时，命令如下所示：

while IFS='' read -r line || [[ -n "${line}" ]];
do
    [code goes here]
done <(${filename})

现在，我有几个文件（命名为1.txt至10.txt），所有文件的行数均相同（〜1600）。 用while语法单独处理每个文件的while循环会花费很长时间，是否有一种方法可以并行读取和处理所有内容（即，将同时读取所有10个文件，但分别处理）？ 例如：

While IFS='' read -r line || [[ -n "${line}" ]];
do
    [code goes here]
done <(1.txt; 2.txt; 3.txt; ...)

还是除了创建10个单独的脚本来执行此操作以外，还有更好的方法来实现所需的多文本处理吗？

首要目标是文件1.txt-10.txt由〜1600个单独的ID组成，其中[code go here]部分将首先出现：

1）逐行读取ID

2）基于ID，将引用一个主文件，该文件包含有关ID的信息，例如该特定ID的时间。 这次提取

3）现在，基于提取的时间信息，我们以1分钟和1小时之后的2分钟为增量构建文件。 然后，我们引用这60个文件中的每个文件，打开它们，然后从该文件中提取一行，最后将其转储到新文件中。

因此，该过程包括打开多个不同的文件以供参考。

Answer 1

您可以修改现有脚本以将文件名用作命令行参数。

例如。 如果脚本名称是process_file.sh $./process_file.sh <file_name>

您可以开发另一个支持脚本，该脚本具有文件和循环列表，并调用此脚本，然后使用“＆”将其推入后台。

declare -a arr=("1.txt" "2.txt" "3.txt")

for i in "${arr[@]}"
do
    ./process_file.sh $i &
done

这可能是您可以尝试检查的一种方法。