Загрузка файлов асинхронно
Если у нас есть список URL картинок для загрузки, использование простого цикла for позволит нам загрузить их последовательно, по одной за раз.
Однако, для задач, включающих загрузку большогоколичества маленьких файлов, параллелизация может заметно ускорить процесс.
Для параллелизации мы можем использовать ThreadPoolExecutor из модуля concurrent.futures. Этот инструмент позволяет выполнить функцию загрузки в нескольких параллельных потоках, где в конструкторе необходимо указать максимальное количество потоков для одновременного выполнения.
С помощью метода .map(download, urls) можно развернуть функцию загрузки на каждый URL из списка, обеспечивая их параллельнуюобработку.
Важно понимать, что так как загрузка файлов является IO-операцией, данный метод неускоряет выполнение кода в прямом смысле, а скорее позволяет начать загрузку следующего файла, не ожидая завершения предыдущего.
#python#threading
#python#tensorflow
🐍
TensorFlow Developer Certificate in 2023: Zero to Mastery
Pass the TensorFlow Developer Certification Exam by Google. Become an AI, Machine Learning, and Deep Learning expert!
🗣️ Andrei Neagoie, Daniel Bourke
🌟 4.6 - 7119 votes
🔗Link
-----
Main channel:@repo_science
Coupons: @freecoupons_reposcience
-----
#вакансия#python#fulltime#СПб#DataScience#Middle#Senior
🎯 Вакансия для Data Scientist с опытом разработки чат-ботов
💰 ЗП 250-300
О компании и команде:
Офис в Санкт-Петербурге, работа фулл тайм в офисе
Проект: построение и внедрение моделей для поддержки направления финансового мониторинга Банка
Функциональные обязанности:
- Разработка чат-ботов для сотрудников компании, которые должны помочь им быстрее получать знания из различных баз данных
- Поддержка внедрения и мониторинга разработанных чат-ботов
- Написание документации о результатах разработки
- Работа с заинтересованными подразделениями для обеспечения соблюдения нормативных требований и внутренних политик
- Взаимодействие с командами ИТ и управления данными в части контроля качества данных
Ожидания от кандидата:
- Опыт работы в роли Data Scientist от 2 лет
- Опыт создания чат ботов на базе трансформеров
- Знание устройства больших языковых моделей LLM и способность разобраться в архитектуре языковой модели уровня GPT
- Знание NLP
- Сильные коммуникационные навыки
- Внимание к деталям и срокам выполнения задач
Условия работы:
- Оформление по ТК РФ и стабильную работу в крупном федеральном банке
- ДМС со стоматологией
- Уникальный портфель бенефитов по программе софинансирования (фитнес, школа ин. языков на выбор, скидки на продукты банка и партнеров)
- Внутренние спортивные мероприятия, материальная поддержка в различных жизненных ситуациях, скидки на страховые коробочные продукты банка и партнеров и многое другое
- Развитие экспертизы: оплачиваем профессиональные тренинги и внешние образовательные курсы, организуем IT-активности (митапы, хакатоны, юконы)
- Полугодовая аттестация с возможностью пересмотра заработной платы и грейда позиции
- А ещё: комфорт, свобода, минимум бюрократии, гибкое начало и завершение рабочего дня, отсутствие дресс-кода
пишите @KEKatarina
Не забудьте уточнить, что вы из @datasciencejobs
🗺 Город: Москва, ст. м. Кунцевская (5 минут пешком от метро)
Формат работы: офис, 5/2 с 9:00 до 18:00
Занятость: полная
ЗП вилка: 120-170 к на руки (с официальным оформлением с первого рабочего дня (полное соблюдение ТК: больничные, отпуска))
Обязанности:
Коммуникация с заказчиком и сбор требований;
Подготовка технических тасков совместно с ИТ;
Тестирование разработанного функционала;
Передача на поддержку готового продукта. Проведение ознакомления/обучения по работе с новым функционалом;
Постановка ТЗ для ИТ отдела;
Подготовка сбора метрик (по заготовленному процессу). Метрики измерения успешности процесса;
Определение источников данных для сбора информации для формировании метрик.
Требования:
Навыки визуализации данных и создания графиков и диаграмм;
Способность погрузиться в любую инфраструктуру данных;
PowerBI – высокий уровень;
Уверенно владеть SQL;
Есть опыт автоматизации и понимание принципов работы ML, построения модели;
Python на уровне уверенного пользователя (pandas, numpy, matplotlib, seaborn, другие стандартные питон-библиотеки);
Хорошие коммуникативные навыки.
По всем вопросам: @AromamirHR
#москва#python#ml#аналитика#analyst#офис
#vacancy#parttime#Data_Scientist#Python#NLP
Мы ищем академического директора для магистерской программы Искусственный интеллект в области лингвистики (компьютерная лингвистика), реализуемой совместно с Томским государственным университетом.
Каким мы видим идеального кандидата?
- Senior Data Scientist в области NLP (Natural Language Processing) и выше с опытом работы в этом грейде от 5 лет;
- Опыт в найме junior и middle-специалистов;
- Понимание стандартов профессии и актуального профиля компетенций специалиста, требуемого на рынке труда;
- Опыт работы в компаниях, лидирующих на российском или зарубежном рынке в выбранной индустрии;
- Активный участник сообщества, опыт выступления на конференциях, митапах (или их организация) будет преимуществом.
Предлагаем:
- Удаленная парт-тайм работа до 20 часов в месяц.
- Возможность реализовывать свои идеи и влиять на IT-индустрию/
- Ежемесячный гонорар, привязанный к количеству новых студентов (по типу роялти).
- Крутая команда с сильной экспертизой в сфере EdTech.
- Укрепление вашего личного бренда.
- Бесплатное обучение на любом курсе образовательной группы SkillFactory: в школе дата-профессий и программирования SkillFactory, школе дизайна Contented.
С полным ТЗ можно ознакомиться по ссылке- https://docs.google.com/document/d/11yE4ycHg_oZLRmfRD936yhVISWmtw3A1chxWUI-qe0Q/edit?usp=sharing
Контакт для связи- @anika_kor