TGINSIGHT SIMILAR POSTS
Изворен канал @pythonotes · Post #425 · 20 апр.
Недавно делал быстрый прототип асинхронного приложения в котором требовалось вызывать много синхронного кода. Да, я знаю, что это не лучший дизайн, но нужно было быстрое решение на один процесс и без очередей. Поэтому я выполнял код в потоках. Выглядело это примерно так: from fastapi.concurrency import run_in_threadpool async def execute(data: DataRequest) -> DataResponse: try: result = await run_in_threadpool(sync_function, data) return DataResponse(data=result) except Exception as e: return DataResponse( error=str(e), success=False, ) В общем работает нормально. Для всех вызовов под капотом используется общий тредпул, всё работает предсказуемо. Но потребовалось изменить количество запускаемых в пуле потоков (по умолчанию создается 40 воркеров). Так как дело происходит с FastAPI, делается это через lifespan используя настройки anyio: import anyio @asynccontextmanager async def lifespan(app: FastAPI): limiter = anyio.to_thread.current_default_thread_limiter() limiter.total_tokens = 100 yield # если вдруг нужно вернуть обратно limiter.total_tokens = 40 Зачем менять количество воркеров? - уменьшить, если оперативки мало (один тред занимает ~8мб) - увеличить чтобы выдержать нагрузку Если есть предложения получше при тех же вводных - предлагайте😉 #async
Hashtags
Пребарај: #aiopg
@djangoproject · Post #187 · 14.10.2016 г., 05:25
https://github.com/aio-libs/aiopg #aiopg is a library for accessing a #PostgreSQL database from the #asyncio (PEP-3156/tulip) framework. It wraps asynchronous features of the Psycopg #database driver.
@djangoproject · Post #167 · 22.09.2016 г., 14:01
https://github.com/aio-libs/aiomysql #aiomysql is a "driver" for accessing a #MySQL database from the #asyncio (PEP-3156/tulip) framework. It depends on and reuses most parts of #PyMySQL . aiomysql tries to be like awesome #aiopg library and preserve same api, look and feel. Internally aiomysql is copy of PyMySQL, underlying io calls switched to async, basically yield from and asyncio.coroutine added in proper places)). sqlalchemy support ported from aiopg.
@djangoproject · Post #293 · 10.04.2017 г., 09:41
http://aiomysql.readthedocs.io/en/latest/sa.html aiomysql.sa — support for SQLAlchemy functional SQL layer sqlalchemy support ported from #aiopg, so #api should be very familiar for aiopg user. While core API provides a core support for access to #MySQL#database, manipulations with raw SQL strings too annoying. Fortunately we can use excellent SQLAlchemy Core as SQL query builder. So you can execute SQL #query built by tbl.insert().values(val='abc') or tbl.select() expressions. #sqlalchemy has rich and very powerful set of SQL construction functions, please read tutorial for full list of available operations. Also we provide SQL transactions support. Please take a look on SAConnection.begin() method and family.