Передача вывода из скрипта Python на удаленную машину?

Question

Передача вывода из скрипта Python на удаленную машину?

1

У меня есть python script, который выводит/печатает большой массив (размером 50 МБ) на экран. Этот script работает на machineA. Возможно ли "вывести" этот вывод на machineB, где он будет обработан?

Я знаю, что я могу сохранить вывод в файле на machineA, а затем отправить файл в machineB. Мне просто интересно, можно ли сделать это без необходимости сначала сохранять данные в файл (на machineA).

Будут оценены любые решения (python, bash shell, другие идеи).

user3262424 11 март 2011, в 22:17

Источник

Теги:

python

bash

linux

shell

5 ответов

1

На machineA:

python script-on-machineA.py --options | ssh machineB tee /file/on/machine/B.txt

В качестве альтернативы, на машинеB:

ssh machineA python /path/to/script-on-machineA.py --options | cat > /file/on/machine/B.txt

Ryan Thompson 11 март 2011, в 19:34

0

Это будет хорошо работать, так как я могу легко SSH между машинами.
user3262424 11 март 2011, в 20:55

1

С помощью инструмента Netcat вы можете легко передавать данные с одной машины на другую.

ChrisJ 11 март 2011, в 18:04

1

Вы можете сделать это на разных уровнях - вот несколько вариантов

использовать ssh для соединения myprog | ssh remotemachine myotherprog
использовать nfs (если перейти в файл
использовать netcat (nc)
используйте что-то вроде экономки

Это зависит от того, насколько надежным и постоянным должно быть решение.

nhed 11 март 2011, в 18:03

0

очень полезно. спасибо, nhed.
user3262424 11 март 2011, в 20:54

1

Возможно, что-то похожее на строки

myPythonScript | ssh user@machine "sh -c 'cat >myfile.txt'"

ПРЕДУПРЕЖДЕНИЕ: полностью вытащили из головы и непроверены!

JCCyC 11 март 2011, в 17:43

Ещё вопросы

Это будет хорошо работать, так как я могу легко SSH между машинами.

6502 · Accepted Answer · 2011-03-11T18-02-00.000Z

Это работа для nc (netcat)... на machineB вы делаете

nc -l 12345 | processing_program

Эта команда запустит netcat в "режиме прослушивания", ожидающем соединения. Как только соединение установлено, то, что поступает из сети, будет отправлено на stdout, а то, что отправлено на stdin, будет отправлено обратно тому, кто подключен.

После этого вы продолжаете machineA и запустите

generating_program | nc machineB 12345

это приведет к тому, что netcat начнет соединение с machineB (порт 12345) и отправит все, что получает от stdin по проводу. Все, что возвращается из этого соединения, отправляется на стандартный вывод.

Ваш ответ лучше (нет необходимости в паролях или для запуска службы).
6502: спасибо. Может ли machineB одновременно прослушивать 20 машин? Кроме того, я должен активно «открыть порт прослушивания» на machineB ?
С помощью этой команды machineB будет прослушивать machineB , кто подключается (так что это, конечно, вообще не безопасно ... любой в Интернете без какой-либо аутентификации может отправлять данные на processing_program используя machineB если к этой машине можно machineB !). nc завершает работу, как только клиент закрывает соединение, так что вам, в конечном счете, потребуется повторно запустить команду в цикле. Если для «открытия порта прослушивания» вы имеете в виду сделать дыру в брандмауэре или указать путь к виртуальному серверу в маршрутизаторе, ответ - да. nc просто прослушивает TCP на указанном порту.