Airdrop Gold : Crypto Airdrop
@airdropgoldchannel · Post #157261 · 24.07.2024 г., 08:21
Today #RockyRabbit#Superset
Hashtags
TGTGInsighttelegram intelligenceLIVE / telegram public index
TGINSIGHT SIMILAR POSTS
Најди сличен содржај
Изворен канал @pythonotes · Post #425 · 20 апр.
Недавно делал быстрый прототип асинхронного приложения в котором требовалось вызывать много синхронного кода. Да, я знаю, что это не лучший дизайн, но нужно было быстрое решение на один процесс и без очередей. Поэтому я выполнял код в потоках. Выглядело это примерно так: from fastapi.concurrency import run_in_threadpool async def execute(data: DataRequest) -> DataResponse: try: result = await run_in_threadpool(sync_function, data) return DataResponse(data=result) except Exception as e: return DataResponse( error=str(e), success=False, ) В общем работает нормально. Для всех вызовов под капотом используется общий тредпул, всё работает предсказуемо. Но потребовалось изменить количество запускаемых в пуле потоков (по умолчанию создается 40 воркеров). Так как дело происходит с FastAPI, делается это через lifespan используя настройки anyio: import anyio @asynccontextmanager async def lifespan(app: FastAPI): limiter = anyio.to_thread.current_default_thread_limiter() limiter.total_tokens = 100 yield # если вдруг нужно вернуть обратно limiter.total_tokens = 40 Зачем менять количество воркеров? - уменьшить, если оперативки мало (один тред занимает ~8мб) - увеличить чтобы выдержать нагрузку Если есть предложения получше при тех же вводных - предлагайте😉 #async
Hashtags
Резултати
Пронајдени 4 слични објави
Пребарај: #superset
当前筛选 #superset清除筛选
Airdrop Gold : Crypto Airdrop
@airdropgoldchannel · Post #157257 · 23.07.2024 г., 11:02
Today #RockyRabbit#Superset
Hashtags
Детектив данных
@detective_data · Post #244 · 19.08.2024 г., 10:29
💰Вычисляем "Вес в приросте" в Superset #оченьдлиннопост#sql#superset Сегодня я продолжу знакомить вас с нестандартными задачами, которые появляются в моей работе, и способами их решения, а заодно протестирую инструмент для написания длинных постов Уверен, что статья будет полезна не только пользователям Superset, но и всем аналитикам 🕵♂️, которые используют SQL в своей работе, учёбе. Больше трёх недель на поиск оптимального решения, ошибки, костыли и элегантный финал. Ставьте лайки, пишите комментарии. Буду рад репостам. Надеюсь данный материал будет вам полезен. https://telegra.ph/Vychislyaem-Ves-v-priroste-v-Superset-08-17
Hashtags
Data Science Jobs
@datasciencejobs · Post #2147 · 11.06.2024 г., 07:41
#вакансия#de#fintech#remote Привет! Мы в поиске Data Engineer (middle+) Компания: Vsemirsoft Проект: банковский проект (входит в ТОП-50 банков РФ). Стек проекта: - #Hadoop, #GreenPlum, #S3; - #Airflow, #Spark, #Kafka, #Debezium; - #ClickHouse, #Superset Часовой пояс: Москва (UTC+03:00, Europe/Moscow) Формат работы: удаленный Зп: 285 тыс. руб. 📌Ключевые компетенции: - АБС - ЦФТ - DWH 📌 Требования: - ОПЫТ РАБОТЫ ОТ 3х ЛЕТ; - опыт работы с хранилищами данных и с отчетностью в АБС Банка; - понимание жизненного цикла разработки программного обеспечения 📌 Как преимущество: - понимание процессов формирования обязательной отчетности (ЦБ) 📌 Задачи в рамках проекта: - анализ новых требований от заказчиков по задачам обязательной отчетности (ЦБ); - реализация изменений и тестирование на стороне DWH; - взаимодействие с внутренними заказчиками, системными аналитиками-экспертами других подразделений; - написание технических задач для развития детального и витринного уровней DWH; - анализ и контроль качества загрузки данных в DWH; - описание логической и физической модели DWH и сопровождение документации в части хранилища данных По всем вопросам обращаться:@odu_v_an