将输出从python脚本管道传输到远程计算机？

Question

我有一个python脚本，可在屏幕上输出/打印一个大数组（大小为50MB）。 该脚本在machineA上运行。 是否可以将此输出“管道”到machineB ，在哪里进行处理？

我知道我可以将输出保存在machineA上的文件中，然后将文件发送到machineB 。 我只是想知道是否有可能这样做，而不必先将数据保存到文件（在machineA ）。

任何解决方案（python，bash shell，其他想法）将不胜感激。

Answer 1

这是nc （netcat）的工作...在machineB执行

nc -l 12345 | processing_program

此命令将以“侦听模式”启动netcat，以等待连接。 建立连接后，来自网络的内容将被发送到stdout，发送到stdin的内容将被发送回连接的任何人。

之后，您继续在machineA运行

generating_program | nc machineB 12345

这将指示netcat启动与machineB （端口12345）的连接，并通过电线发送从stdin获得的任何内容。 从该连接返回的所有内容都将发送到标准输出。

Answer 2

使用Netcat工具，您可以轻松地将数据从一台计算机传输到另一台计算机。

Answer 3

您可以在不同级别上进行操作-这里有一些选择

1. 使用ssh传递myprog | ssh remotemachine myotherprog
2. 使用nfs（如果转到文件
3. 使用netcat（nc）
4. 用节俭之类的东西

这取决于解决方案的牢固性和持久性

Answer 4

也许有些类似的东西

myPythonScript | ssh user@machine "sh -c 'cat >myfile.txt'"

警告：完全从我的脑海中拔出，未经测试！

Answer 5

在机器A上：

python script-on-machineA.py --options | ssh machineB tee /file/on/machine/B.txt

或者，在machineB上：

ssh machineA python /path/to/script-on-machineA.py --options | cat > /file/on/machine/B.txt