Недавно делал быстрый прототип асинхронного приложения в котором требовалось вызывать много синхронного кода. Да, я знаю, что это не лучший дизайн, но нужно было быстрое решение на один процесс и без очередей. Поэтому я выполнял код в потоках.
Выглядело это примерно так:
from fastapi.concurrency import run_in_threadpool
async def execute(data: DataRequest) -> DataResponse:
try:
result = await run_in_threadpool(sync_function, data)
return DataResponse(data=result)
except Exception as e:
return DataResponse(
error=str(e),
success=False,
)
В общем работает нормально. Для всех вызовов под капотом используется общий тредпул, всё работает предсказуемо.
Но потребовалось изменить количество запускаемых в пуле потоков (по умолчанию создается 40 воркеров).
Так как дело происходит с FastAPI, делается это через lifespan используя настройки anyio:
import anyio
@asynccontextmanager
async def lifespan(app: FastAPI):
limiter = anyio.to_thread.current_default_thread_limiter()
limiter.total_tokens = 100
yield
# если вдруг нужно вернуть обратно
limiter.total_tokens = 40
Зачем менять количество воркеров?
- уменьшить, если оперативки мало (один тред занимает ~8мб)
- увеличить чтобы выдержать нагрузку
Если есть предложения получше при тех же вводных - предлагайте😉
#async
跳进Passacaglia的兔子洞(1)——什么是 Passacaglia?
前些天在广播里听到了交响乐版的 Bach 的Passacaglia and Fugue in C minor,于是略微跳进了兔子洞🤣了解了一下Passacaglia这个形制,Bach的这一首Passacaglia以及管风琴的一些知识~
先是了解了一下 Passacaglia 这个形制。Passacaglia 是17世纪在西班牙起源的,这个词本身的意思大约就是 cross(passa) caglia(street)。最大的特点是有一个bass-ostinato,然后在这个基础上写很多旋律variation。一般 Passacaglia 都是三拍子的,而且有一种比较严肃的感觉。这个形制和 Chaconne 非常类似,后面也会被音乐家混合使用。
除了巴赫的这首著名的 Passacaglia and Fugue in C minor 之外,其他比较有名的 Passacaglia 还有 Handel 的 Harpsichord Suite No. VII in G minor (HWV 432)最后一个乐章, Purcell 的歌剧Dido and Aeneas 中的 Dido’s Lament,Mendelssohn 也写过一首管风琴的 Passacaglia in C minor (不愧是巴赫复兴鼻祖?😂),还有肖斯塔科维奇的 Lady Macbeth of Mtsensk Act 2 的 interlude (也有一个管风琴版本)。
扯了这么多,还是先分享一下拉我进兔子洞的罪魁祸首吧,由Leopold Stokowski改编的交响乐版 Bach: Passacaglia And Fugue In C Minor, BWV 582~
https://www.youtube.com/watch?v=naBh9Vhc6ZI
#bach