@ilia_plasma · Post #613 · 05.02.2025, 06:53
Китайцы продолжают бомбить рынок новыми ИИ моделями. #ByteDance выпустил видео генератор OmniHuman-1 для замены блогеров, певцов и CEO Nvidia. ❗️ Осторожно: все видео - AI
Hashtags
TGINSIGHT SIMILAR POSTS
Источник @ai_machinelearning_big_data · Post #8086 · 16 июл.
🌟MoVieS: Синтез 4D-видов с учетом движения. ByteDance в соавторстве с Пекинским университетом и Карнеги Меллон разработали MoVieS, feed-forward модель, которая из обычного монокулярного видео за секунду синтезирует полноценную 4D-сцену, объединяя в себе геометрию, внешний вид и, что самое важное, движение. В основе метода лежит идея представления динамической сцены с помощью «динамических сплэттер-пикселей». Если вы знакомы с 3D Gaussian Splatting, то поймете сразу: модель представляет каждый пиксель входного видео как гауссов примитив в 3D-пространстве. Новизна MoVieS в том, что она не просто определяет их статичные параметры (положение, цвет, прозрачность), но и предсказывает вектор их движения во времени. Иными словами, для каждой частицы в сцене модель знает, где она будет в любой заданный момент. Архитектурно MoVieS построена на геометрически предобученном трансформере VGGT, который обрабатывает кадры видео. Далее в дело вступают три специализированные «головы»: 🟠Depth Head - предсказывает карту глубины; 🟠Splatter Head - отвечает за атрибуты самих гауссовых сплэттеров для рендеринга; 🟢Motion Head - самая главная, оценивает смещение каждого примитива. Такой единый фреймворк позволяет обучать модель на самых разнородных датасетах: где-то есть разметка глубины, где-то - трекинг точек, а где-то - только видео. MoVieS - это еще про скорость. Согласно техотчету, на генерацию сцены уходит меньше секунды (0.93 с), тогда как у альтернативных методов на это уходят десятки минут. При этом качество на бенчмарках динамических сцен (DyCheck и NVIDIA) либо на уровне, либо превосходит SOTA решения. Но самое интересное - это zero-shot возможности. Модель, обученная по сути на задаче синтеза новых ракурсов, внезапно оказывается способна без всякого дополнительного обучения сегментировать движущиеся объекты и оценивать scene flow (попиксельный поток в 3D). Достаточно просто посмотреть на предсказанные векторы движения. ⚠️Кода для инференса, обучения и чекпоинтов пока нет, но обещают. 📌Лицензирование: MIT License. 🟡Страница проекта 🟡Arxiv 🖥GitHub @ai_machinelearning_big_data #AI#ML#4D#MoVieS#ByteDance
Hashtags
@ilia_plasma · Post #613 · 05.02.2025, 06:53
Китайцы продолжают бомбить рынок новыми ИИ моделями. #ByteDance выпустил видео генератор OmniHuman-1 для замены блогеров, певцов и CEO Nvidia. ❗️ Осторожно: все видео - AI
Hashtags
@semasci · Post #313 · 28.09.2024, 17:02
Вчера состоялась премьера анимационного фильма «Дикий робот», который уже называют лучшей работой студии DreamWorks. Сюжет разворачивается вокруг робота Роз, который попална остров, где учится выживать и находить контакт с местными обитателями. На Rotten Tomatoes рейтинг уже 98% от зрителей и столько же от критиков. Все хвалят фильм за визуальную эстетику, напоминающуюклассическую анимацию. Также авторам удалось передать важные темы, при этом сохранив баланс между юмором и эмоциональной глубиной. Это мы смотрим r/#movies
Hashtags
@acidcrunch · Post #1123 · 13.06.2025, 20:46
ByteDance анонсировала Seaweed APT2 — модель для генерации видео в реальном времени. Пока доступна только демонстрация, но уже видно, что это серьёзный шаг вперёд. 🔍 Краткий обзор возможностей: Реальное время: генерация видео при 24 кадрах в секунду с разрешением до 1280x720 пикселей. Длительность: поддержка видео продолжительностью до 1 минуты (1440 кадров) при использовании всего одной нейронной сети (1NFE). Интерактивность: возможность управления персонажами и камерой в реальном времени. Качество: высокая детализация и плавные движения. Аппаратные требования: работает на одном H100 GPU при разрешении 736x416 пикселей. 🧠 Технология: Модель использует авторегрессионную архитектуру с кэшированием ключевых векторов (KV cache), что позволяет достигать постоянной скорости вывода. Обучение проводилось с использованием adversarial post-training (APT), что обеспечивает высокое качество генерации. ⚠️ Важные моменты: Не open-source: модель не имеет открытого исходного кода. Возможная интеграция: скорее всего, Seaweed APT2 будет интегрирована в продукты ByteDance, такие как CapCut или TikTok Studio. 🔗Подробнее #ByteDance | acidcrunch
Hashtags
@earth_climate_tech · Post #401 · 19.10.2023, 16:00
Polymathic - междисциплинарный ИИ Ох, какая классная межуниверситетская инициатива - Polymathic🔥. Задача, которую они решают, заключается в создании ИИ моделей, которые используют информацию из наборов данных различных модальностей и разных научных областей, которые не имеют общего представления (например, текста). Такие модели могут использоваться в качестве надежных базовых показателей или можно сделать файн-тьюнинг для конкретных приложений. Такой подход может демократизировать ИИ в науке, предоставляя более сильные априорные модели для общих концепций, таких как причинность, измерение, обработка сигналов, и т.п. В общем история с базовыми и генеративными моделями понемногу адаптируется к научным задачам, за что мы топим тоже 🤘. Реальных проектов пока немного, но есть, например, Multiple Physics Pretraining - подход к разработке больших предобученных физических суррогатных моделей или AstroClip - видимо модель CLIP для астрофизиков. На данный момент кроме команды ученых есть и крутой консультативный совет, например, с Яном Лекуном (Yann LeCun) из Meta AI. #AI#ML
@mos_events · Post #810 · 21.10.2024, 16:31
🏙️ Подборка мероприятий на неделю 1️⃣Лекция и обсуждение картины "Восемь с половиной" - 22 октября (вторник) - Еврейский музей и центр толерантности - от 250 рублей В Еврейском музее и центре толерантности проходит ретроспектива любимых фильмов Бродского, приуроченная к выставке "Место не хуже другого", посвященной жизни поэта. В этот вторник зрителей ждет показ бессмертной классики кинематографа - фильма "Восемь с половиной" Федерико Феллини. https://www.jewish-museum.ru/events/vosem-s-polovinoy-federiko-fellini-kinopokaz-i-lektsiya-evgeniya-tsurkana/ #movies 2️⃣ Показ фильма"Дух Улья" от Гэс-2 - 23 октября (вторник) - ГЭС-2 - бесплатно Дом культуры ГЭС-2 приглашает зрителей познакомиться с испанским кинематографом! "Дух Улья" принес режиссеру главный приз фестиваля в Сан-Себастьяне и мировую известность, стал одной из любимых лент Акиры Куросавы. Эта историю о детстве и взрослении в Испании времен Франко, поэтическое и печальное. Фильм пройдет а рамках ретроспективы испанского кино. #кино https://ges-2.org/the-spirit-of-the-beehive 3️⃣Конференция «Loginom Day 2024: Аналитика данных, доступная каждому» - 24 октября (четверг) - Согласие холл - бесплатно В четверг пройдет конференция, интересная всем, кто увлекается аналитикой данных. Интересные кейсы, сотрудничества с компаниями и нетворкино. Приходите! #наукаhttps://gorodzovet.ru/moskva/konferentsiia-loginom-day-analitika-event10537559 4️⃣Экскурсия от винзавода "Как понять современное искусство?" - 25 и 26 октября (пятница и суббота) - Центр Винзавод - от 900 рублей Центр современного искусства Винзавод организует экскурсию на которой зрители смогу узнать имена ключевых художников современности и интересные факты о том, как работают галереи Особенность экскурсии — в ее погружении в историю российского современного искусства, так как многие ключевые события происходили именно на территории Винзавода. #искусство https://afisha.yandex.ru/moscow/excursions/kak-poniat-sovremennoe-iskusstvo-vinzavod?source=rubric
Hashtags
@semasci · Post #1181 · 20.06.2025, 05:11
✨Seedance 1.0 — новый прорывной AI-генератор видео от ByteDance (создателя TikTok). Seedance 1.0 создает Full HD-видео длительностью до 5 секунд всего за 41 секунду, поддерживает сложные сцены со сменой ракурсов и мультишотовые последовательности, а также адаптируется под любые стили — от фотореализма до аниме . По данным платформы Artificial Analysis, Seedance 1.0 превосходит конкурентов, включая Google Veo 3, в качестве генерации, точности следования промпту и плавности движений. Но, в отличие от Veo 3, который требует подписки и геодоступа, Seedance 1.0 доступен через открытые сателлиты без vpn (например, seedance.tv/ru) и стоит всего ~$0.50 за ролик . Пока инструмент не генерирует звук, но идеален для короткого контента в соцсетях. Попробовать можно здесь: aigcarena.com, seedance.tv, lunaai.video или pollo.ai (где вам лично удобнее). Почитать побольше и посмотреть ролики можно здесь. Ожидаем, что Seedance скоро добавят в Dreamina, так как это все продукты одной компании, ByteDance.. Девушка в русском сарафане и косынке едет на Харлей девидсон по просёлочной дороге #AI#видеогенерация#Seedance#ByteDance#Veo3 https://t.me/semasci
@mos_events · Post #813 · 04.11.2024, 11:02
🏙️ Подборка мероприятий на неделю 1️⃣Паблик-ток "Российский рынок ИИ-решений: прогнозы, тренды, аналитика. Монитор технологий" - 5 ноября (вторник) - "Умный город" Просп. Мира, 119, стр. 461 (ВДНХ) - бесплатно Пространство "Умный город" организует мероприятие о перспективах развития Искусственного Интеллекта в России. На мероприятии выступят ведущие эксперты в области IТ и AL, включая представителей компаний РДТЕХ, Content AI, ROBIN, BSS и других. Каждый из них поделится уникальным опытом и представит свое видение будущего технологий. https://gorodzovet.ru/moskva/rossiiskii-rynok-ii-reshenii-prognozy-event10566937 #ai#it 2️⃣Конференция "Матемаркетинг-2024" - 7-8 ноября (четверг - пятница) - Кластер Ломоносова - от 35 тысяч рублей Главная конференция осени в мире российского маркетинга пройдет уже на этой неделе. В программе доклады и обсуждения по самым актуальным темам, кофе-брейки и зоны для нетворкинга. Партнеры конференции - ведущие бренды от Яндекса до Хед Хантера. https://matemarketing.ru/ #conference 3️⃣Кинопоказ "Одержимость" в музее Гараж - 9 ноября (суббота), 18:00 - Лекторий музея "Гараж" - 400 рублей На выходных смотрим первый фильм Дэмьер Шазелла, принесший ему гран-фри фестиваля Санденс и три Оскара еще до успеха "Ла Ла Ленда". Картина "Одержимость" также посвящена музыке - это драма юного барабанщика и его учителя с тяжелым характером. Шазелл писал сценарий по следам собственного обучения игре на барабанах. Чтобы справиться с травмирующим опытом игры в джазовом коллективе, режиссер перенес его на бумагу. https://garagemca.org/event/film-screening-whiplash-09-11-2024 #movies 4️⃣Лекция "От Бродского до Цоя: рисунки и картины писателей и рок-музыкантов" - 10 ноября (воскресенье), 14:00 - Еврейский музей и центр толерантности - 350 рублей В это воскресенье Игорь Кузьмичев - исследовать советского андеграунда и автор телеграм канала "Здесь был Майк" - проведет лекцию о художественном творчестве писателей и музыкантов. Почему писатели и музыканты ленинградской «второй культуры» брались за карандаши? Как художники влияли на других представителей арт-среды? И как пригодились художественные навыки в литературном и музыкальном ремесле? https://www.jewish-museum.ru/events/ot-brodskogo-do-tsoya-risunki-i-kartiny-pisateley-i-rok-muzykantov/ #art
Hashtags
@earth_climate_tech · Post #352 · 24.07.2023, 16:00
ClimateLearn - машинное обучение в предсказании климата и погоды ClimateLearn - это библиотека в питоне для доступа к самым современным климатическим данным и моделям машинного обучения стандартизированным и простым способом. Эта библиотека предоставляет доступ к нескольким наборам данных, зоопарку базовых подходов, а также набору метрик и визуализаций для крупномасштабного сравнительного анализа методов статистического масштабирования и временного прогнозирования. В этом ноутбуке можно поучиться как пользоваться. #ML#AI#climate
@mos_events · Post #814 · 11.11.2024, 15:00
🏙️ Подборка мероприятий на неделю 1️⃣ Концерт "Тишина как точка" - 12 ноября - ГЭС-2 - 1400 рублей https://ges-2.org/the-precision-of-silence «Музыка растворяется в молчании» — эта формула Пятнадцатой симфонии Дмитрия Шостаковича, взятая в основу идеи концерта. Творчество позднего Шостаковича - это прозрачная материя, построенная на паузах. Такой подход вдохновляет многих современных композиторов. Произведения Шостаковича и американского композитора Мортона Фельдмана прозвучат в белых залах дома культуры ГЭС-2. #music 2️⃣ Показ фильма "Марсель Дюшан. Искусство возможного" - 15 ноября (пятница), 17:00 - Третьяковская галерея, инженерный корпус - 400 рублей В рамках программы документального кино Beat film festival в кинозале Третьяковской галерее пройдет показ фильма о Марселе Дюшане. Данный кинотрибьют художнику – это совсем не обычный байопик: он демонстрирует, как идеи Дюшана изменили общественное сознание и наше понимание эстетики, искусства и культуры. Картина стала лауреатом международный фестивалей как лучший документальный фильм, основанный на архивах. https://moscow.theatrehd.com/ru/films/marcel-duchamp-the-art-of-the-possible #movies 3️⃣ IT-конференция Merge в Сколково - 15-16 ноября (пятница-суббота - Инновационный центр Сколково) - от 12 500 рублей https://it-events.com/events/26301 На територии технопарка Сколково пройдет масштабная конференция Merge. Среди заявленных тем IT-рынки, Маркетинг, HR и многие другие ключевые направления. Merge – это личная встреча с главными профессионалами IT-отрасли, площадка для взаимодействия с единомышленниками, поиска новых решений, отдыха и общения. #conference 4️⃣ Последняя неделя выставки "Мир искусств Бориса Усова" - до 17 ноября (воскресенье) - Центр Вознесенского - бесплатно https://www.voznesenskycenter.ru/vystavka/vystavka-mir-iskusstva-borisa-usova/ На этой неделе заканчивается возможность посетить выставку Бориса Усова. Лидер группы "Соломенные еноты", поэт, художник и оформитель самиздатовских журналов - все эти ипостаси творчества Усова можно увидеть в Центре Вознесенского. Выставка открывает новую серию проектов Центра, которые будут посвящены поэтам-музыкантам. #art
Hashtags
@earth_climate_tech · Post #391 · 18.09.2023, 18:17
Seismic Foundation Model от создателя FaultSeg3D Как говорится paper alert📖! Когда-то давно d 2018, тогда еще сотрудник Техасского Университета в Остине, Xinming Wu сделал синтетический датасет сейсмических моделей с разломами и обучил на нем довольно простую по нынешним временам сверточную нейронную сеть для сегментации разломов - FaultSeg3D. Написал статью и выкатил модель в октрытый доступ. На тот момент это был прорыв, так как модель работала во многом лучше существующих на тот момент инструментов. Совсем недавно, он же сделал первый шаг к созданию первой базовой модели (Foundation Model) для сейсмического анализа недр и выпустил статью - "Seismic Foundation Model (SFM): a new generation deep learning model in geophysics". Особенность базовых моеделей в том, что они обучены на огромном количестве данных и служат отправной точкой для разработки специализированных моделей и могут быть легко адаптированы к широкому спектру применений. Авторы накопали 192 сейсмических куба, >2 миллионов сейсмических разрезов и натренировали эту самую сейсмическую базовую модель, используя архитектуру Трансформера. Затем протестировали работу модели на различных задачах: классификация фаций, сегментация геологических тел, сейсмическая инверсия, подавление шумов и интерполяция сейсмической записи. Теперь они могут дообучать модель или использовать тонкую настройку для более узких задач. Побольше бы такого! В обсчем, что тут сказать, Data is a King 👑. Есть данные, будет и базовая модель. Но только, сдается мне, что даже с "номинально" открытыми данными все не так просто и там куча условностей. Видимо по этому, ссылка на гитхаб в статье не работает 😀. Статью можете нати во вложении! #ML#AI#paper