Зачем использовать async.gather в Python?

скажем, у нас есть

await async_function_one_with_large_IO_request()
await async_function_two_with_large_IO_request()

против

asyncio.gather(
  async_function_one_with_large_IO_request(), 
  async_function_two_with_large_IO_request())

В первой версии, как только мы достигнем части «большого запроса ввода-вывода» первой функции, она перейдет к запуску function_two, в этом весь смысл await, верно?

Разве это не то же самое, что и версия 2 с сбором?

Какая разница в производительности между ними?

Анализ настроения постов в Twitter с помощью Python, Tweepy и Flair
Анализ настроения постов в Twitter с помощью Python, Tweepy и Flair
Анализ настроения текстовых сообщений может быть настолько сложным или простым, насколько вы его сделаете. Как и в любом ML-проекте, вы можете выбрать...
7 лайфхаков для начинающих Python-программистов
7 лайфхаков для начинающих Python-программистов
В этой статье мы расскажем о хитростях и советах по Python, которые должны быть известны разработчику Python.
Установка Apache Cassandra на Mac OS
Установка Apache Cassandra на Mac OS
Это краткое руководство по установке Apache Cassandra.
Сертификатная программа "Кванты Python": Бэктестер ансамблевых методов на основе ООП
Сертификатная программа "Кванты Python": Бэктестер ансамблевых методов на основе ООП
В одном из недавних постов я рассказал о том, как я использую навыки количественных исследований, которые я совершенствую в рамках программы TPQ...
Создание персонального файлового хранилища
Создание персонального файлового хранилища
Вы когда-нибудь хотели поделиться с кем-то файлом, но он содержал конфиденциальную информацию? Многие думают, что электронная почта безопасна, но это...
Создание приборной панели для анализа данных на GCP - часть I
Создание приборной панели для анализа данных на GCP - часть I
Недавно я столкнулся с интересной бизнес-задачей - визуализацией сбоев в цепочке поставок лекарств, которую могут просматривать врачи и...
0
0
24
1
Перейти к ответу Данный вопрос помечен как решенный

Ответы 1

Ответ принят как подходящий

In the first version, once we hit the 'large io request' part of function one, it's gonna move onto running function_two, that's the whole point of await, right?

Это неправильно. В вашей первой версии async_function_two_with_large_IO_request (которую я буду называть function_two) не будет работать до async_function_one_with_large_IO_request (которую я буду называть function_one) завершает.

Если function_one произойдет с await в другой функции, она передаст управление другой запущенной асинхронной задаче, но function_two еще не запланирована.

Когда вы используете asyncio.gather, задачи планируются одновременно, поэтому, если function_oneawait на чем-то, function_two имеет шанс запуститься (вместе с другими асинхронными задачами).


Обратите внимание, что asyncio.gather создает асинхронную задачу, что обычно подразумевает, что вы должны await выполнить ее:

await asyncio.gather(...)

Документация Python подробно описывает это в Сопрограммы и задачи.

так что же на самом деле делает «ожидание» под капотом?

user1008636 16.05.2022 23:13

Это приводит к тому, что вызывающая асинхронная задача передает управление асинхронному планировщику, который может запланировать другую асинхронную задачу. Когда функция await-ed завершается, вызывающие задачи могут быть снова запланированы при следующем вызове другой задачи await.

larsks 16.05.2022 23:20
realpython.com/async-io-python — хороший обзор асинхронного программирования в Python.
larsks 16.05.2022 23:22

еще один вопрос. в этом примере создает ли asyncio.gather свой собственный цикл мини-событий, который включает только две функции? т. е. async.gather будет блокироваться до тех пор, пока обе переданные функции не будут завершены?

user1008636 16.05.2022 23:44
asyncio.gather создает асинхронную задачу. Вам нужно await на результат. Она запланирована так же, как и любая другая асинхронная задача.
larsks 17.05.2022 01:19

Другие вопросы по теме