Процесс, требующий ресурсов, разделен на несколько процессов?

Question

Процесс, требующий ресурсов, разделен на несколько процессов?

1

Он замечен в движке Google Cloud. Несколько экземпляров моего скрипта создаются (по bash?). Причина может заключаться в том, что сценарий требует очень большого объема памяти. Как это разделение сделано точно? Любое влияние на производительность?

[UPDATE] Моя ошибка. Эти экземпляры представляют собой потоки, созданные python.

user7586189 30 сен. 2018, в 17:10

Источник

0

Похоже на python , а не на bash ...
Poshi 30 сен. 2018, в 14:34
1

Пожалуйста, посмотрите как создать минимальный, полный и проверяемый пример .
Cyrus 30 сен. 2018, в 14:54
1

@Poshi, родителем всех процессов python является bash, в соответствии с идентификатором родителя.
user7586189 30 сен. 2018, в 16:20
0

@Poshi, вы правы, это темы, созданные python.
user7586189 02 окт. 2018, в 20:36

Показать ещё 2 комментария

Теги:

python

google-compute-engine

linux

process

1 ответ

Ещё вопросы

Пожалуйста, посмотрите как создать минимальный, полный и проверяемый пример .
@Poshi, родителем всех процессов python является bash, в соответствии с идентификатором родителя.
@Poshi, вы правы, это темы, созданные python.

peterh · Accepted Answer · 2018-09-30T13-34-00.000Z

1

Лучший ответ

Не переоценивайте навыки Python. Python не способен выполнять даже многопоточную модель процесса, автоматически разделяя задачи на параллельные исполняемые подзадачи.

Этот процесс делится на подпроцессы, потому что он был написан таким образом.

Функция, которую вы оцениваете, автоматически распараллеливает процессы, практически неразрешима в общем случае, хотя она по-прежнему является горячей темой в области компьютерных наук.

peterh 30 сен. 2018, в 13:34

0

Родителем всех процессов Python является bash, в соответствии с идентификатором родителя. Так что я подозреваю, что не все скрипты python создают все процессы, а как-то bash ...
user7586189 30 сен. 2018, в 16:22
0

@ user7586189 Сделать это практически невозможно с помощью Linux API, потому что процессы могут разворачивать только своих собственных потомков. Единственный способ будет, если bash каким-то образом «попросит» python форкнуть дочерние процессы с помощью API трассировки / отладки, в bash для этого даже нет ничего подобного. Кроме того, bash ничего не знает от внутренних частей питона, распараллеливание этого было бы глубокой и почти невозможной задачей, требующей очень глубокой реструктуризации его внутренних частей. Поверьте, такого нет, питон создает дочерние процессы, потому что это однопоточный язык.
peterh 30 сен. 2018, в 16:25
0

@ user7586189 Кстати, сила linux (на этом базовом уровне) не в том, что он будет таким умным, а в том, что он делает именно то, что вы ему говорите.
peterh 30 сен. 2018, в 23:47
0

Я думаю, вы правы. На самом деле количество потоков (NLWP) соответствует созданным процессам. Забавно, что все эти экземпляры имеют свои PID, но на самом деле являются потоками?
user7586189 02 окт. 2018, в 19:23
0

да, они темы.
user7586189 02 окт. 2018, в 20:36
0

@ user7586189 Нет, это процессы. В мире Python существует обычай, который они называют процессными потоками, но, делая это, они говорят о том, что на самом деле делает их продукт. Поток означает, что они управляют множественным выполнением в одном и том же адресном пространстве. Ни один процесс Python не может этого сделать, сам интерпретатор Python совершенно не в состоянии это сделать, это простой однопоточный интерпретатор, и он нигде не встречается ни в одной модели многопоточного процесса. Это даже не планируется. Кроме того, ваше pstree ясно показывает, что это процессы, потоки заключены в
peterh 02 окт. 2018, в 22:21
0

@ user7586189 {} , процессы в [] . Проверьте свой Firefox в pstree , вы увидите разницу! (В недавнем Firefox вы должны видеть родительский процесс с некоторыми дочерними процессами, а внутри всех дочерних процессов вы должны видеть некоторые потоки). У Python есть свои преимущества и недостатки, у каждого может быть свое мнение, как они их взвешивают, но я уверен, что лишь немногие говорят за это, что это будет преимуществом Python.
peterh 02 окт. 2018, в 22:24
0

@ user7586189 Несмотря на это, в некоторых документах на python вы можете обнаружить, что они говорят о «потоках», не верьте этому. Если они будут потоками, то вы увидите это в выводе pstree , но в обозримом будущем вы не увидите этого ни в одном программном обеспечении Python.
peterh 02 окт. 2018, в 22:26

Показать ещё 6 комментариев