（参数列表太长）使用 *cat* 打开大量文件时 [重复]

Question

这个问题在这里已经有了答案：

连接文件夹中的大量文件时参数列表太长3 个答案

5 个月前关闭。

我正在尝试做类似的事情

cat */httprobe-subdomains.out | xargs -n1 -I{} -t sh -c 'curl -k -i --write-out "\n++++++++++\nResponse Code: %{response_code}\nRedirection URL: %{redirect_url}\nContent Size: %{size_download}" "http://{}" -L >> response/http-{}.out '

回应是

-bash: /usr/bin/cat: Argument list too long

如果我尝试cat */httprobe-subdomains.out标准错误将是相同的-bash: /usr/bin/cat: Argument list too long

我希望我有办法摆脱这种情况，并且能够在 * 文件夹中对所有 httprobe-subdomains.out 文件进行分类，并将其交给 xargs 处理。

Answer 1

Argument list too long错误记录在errno(3) （如E2BIG ）中，并且与您的GNU bash shell 完成的某些execve(2)系统调用有关。 使用带有ARG_MAX的sysconf(3)来查询该限制。

你有几种方法：

• 重新编译您的 Linux kernel以提高该限制。
• 使用适当的系统调用（2）更适当地编写一些小的 C 程序，或者编写一些Python脚本，或者一些GNU guile脚本，......做同样的事情
• 增加一些限制，但适当地使用setrlimit(2) （可能使用 shell ulimit内置）。

另请参阅GNU bash的文档和源代码