Недавно делал быстрый прототип асинхронного приложения в котором требовалось вызывать много синхронного кода. Да, я знаю, что это не лучший дизайн, но нужно было быстрое решение на один процесс и без очередей. Поэтому я выполнял код в потоках.
Выглядело это примерно так:
from fastapi.concurrency import run_in_threadpool
async def execute(data: DataRequest) -> DataResponse:
try:
result = await run_in_threadpool(sync_function, data)
return DataResponse(data=result)
except Exception as e:
return DataResponse(
error=str(e),
success=False,
)
В общем работает нормально. Для всех вызовов под капотом используется общий тредпул, всё работает предсказуемо.
Но потребовалось изменить количество запускаемых в пуле потоков (по умолчанию создается 40 воркеров).
Так как дело происходит с FastAPI, делается это через lifespan используя настройки anyio:
import anyio
@asynccontextmanager
async def lifespan(app: FastAPI):
limiter = anyio.to_thread.current_default_thread_limiter()
limiter.total_tokens = 100
yield
# если вдруг нужно вернуть обратно
limiter.total_tokens = 40
Зачем менять количество воркеров?
- уменьшить, если оперативки мало (один тред занимает ~8мб)
- увеличить чтобы выдержать нагрузку
Если есть предложения получше при тех же вводных - предлагайте😉
#async
#аренда#А867⤴️⤴️⤴️
Пришел гость заморский к Финскому 🌊 морю, забросил авоську и выловил рыбку, непростую — золотую 🐡
Молвит ему рыбка человеческим голосом: «Проси все, что хочешь, только отпусти в синее море». Поглядел заморский гость на свой ключ от хостела 🔑 и говорит: «Надобно мне снять, рыбка, настоящую трёшку, уютную по метражу, а не по фантазиям 💭 риэлтора, ближе к центру, но с хорошей шумоизоляцией, а не акустикой от соседского бара».
Посмотрела на него рыбка и говорит: «Исполню твое желание, но жить буду с тобой, в золотом 🛁 аквариуме».
📐 110,6 м²
🪜 этаж 5 из 5
💸220к/мес + счетчики 200к/мес + счетчики
🔥#БЕЗКОМИССИИ
📍Маяковского, 42
📲 на связи собственник и дизайнер квартиры в одном лице Екатерина @daphne_spb
*больше фото в комментариях ⤵️
Нестыдные | Петербург.
Подписаться