PHYGITAL+CREATIVE

Meta представила нейросеть SAM, способную составить конкуренцию ChatGPT и Midjourney. SAM идеально определяет объекты на фото или видео, позволяя без труда удалять или изменять их фон. Уже доступна демо версия для тестирования, а также подробнее о модели можно узнать тут. Как вам? Будите пробовать? #News

OpusAi представила интерфейс для создания 3D-миров с помощью AI OpusAi представила свою новейшую разработку – интуитивный интерфейс, позволяющий создавать 3D-миры при помощи искусственного интеллекта. Теперь, чтобы воплотить свои фантазии в жизнь, вам просто нужно описать сюжет, и AI превратит его в захватывающий виртуальный мир! Эта технология не только открывает новые горизонты для разработчиков игр и аниматоров, но и предоставляет возможность каждому стать творцом своих собственных миров. Благодаря интуитивному и простому интерфейсу, вы сможете создавать уникальные и красочные 3D-сцены, даже не имея опыта в компьютерной графике или программировании. Записаться на бета-тестирование.

Еще никогда нельзя было сделать сны явью так легко и быстро. Нужно только успеть записать их с утра. В продолжение темы мэтча нейросетей и метавселенной: Техасский стартап Opus показал интерфейс своего продукта для создания контента с помощью ИИ. Пользователю/оператору необходимо всего лишь прописывать сюжет сцены, а нейросеть будет строить виртуальное пространство по заданному сценарию. Процесс похож на написание детального текста, который оживает на ваших глазах! Американцы обещают удешевить строительство в метавселенной в 10 раз. ИИ-приложение позволяет работать с освещением, камерой, ландшафтом, домами, растениями, дорогами, аватарами и анимациями. Проект открыл запись на тестирование для продюсеров, художников, виртуальных моделей, актеров озвучки и хореографов.

Google патентует технологию тестирования игр с помощью ИИ Google подала заявку на патент технологии, которая позволяет тестировать игры с помощью искусственного интеллекта. Корпорация рассчитывает, что она значительно ускорит работу над играми. В описании заявки Google указала, что за последние годы игры стали гораздо сложнее и масштабнее, однако процесс тестирования почти не изменился. Из-за этого тестировщики вынуждены тратить на проверку тайтлов очень много времени, но все равно не в состоянии заметить все ошибки. В итоге студии начали чаще задерживать релизы и выпускать игры с множеством багов. Google хочет сделать так, чтобы нейросеть могла управлять персонажами в тестируемых играх и в режиме реального времени принимать решения. Ранее СМИ сообщали, что заявку на похожий патент подала Electronic Arts. Также над технологией ИИ-тестирования игр работают в Microsoft.

Тут Plask запускают свой генеративный ии для арта http://plask-21022821.hs-sites.com/share/hubspotvideo/108796298877

Зацените новый инструмент для ротоскопа от разраба deepfacelab https://iperov.github.io/DeepXTools/ считай бесплатный аналог copycat в nuke

Кто милее всех на свете? Spline, ёптия! Нет, вы посмотрите, что они вытворяют! 3Д по промту, а? Кончили? Короче, spline.design/ai.

Segment Anything Meta представила крутейшую и полностью открытую модель для сегментации изображений. Говорят, что она претендует на роль GPT в мире CV. Моя знакомая написала небольшой обзор со всеми подробностями про эту модель и её обучение. Читается довольно легко, а также там много картинок — поэтому рекомендую всем заглянуть!

Вы наверняка подозревали, что у моделей есть свой свой hub. Ну в смысле место, куда люди загружают обученные нейронки, а другие могут их оттуда скачивать и использовать. Вы же об этом подумали, да? 😑 Так вот, сейчас индустриальный стандарт для опенсорсных моделей - это HuggingFace 🤗 Hub. В статье HuggingGPT: Solving AI Tasks with ChatGPT and its Friends in HuggingFace предлагается дать ChatGPT возможность обращаться к этим моделям (а их тысячи, и они решают сотни разных задач). То есть саму языковую модель на основе GPT мы не учим рисовать изображения или переводить текст в речь, но мы даём ей возможность использовать внешние инструменты. Похожая по смыслу работа уже упоминалась в канале, но та была куда менее масштабируемой, и требовала ресурсов для запуска нейронок локально. Итого получаем примерно следующее: 1) ChatGPT получает команду на человеческом языке 2) переводит команду в набор "Задач", которые надо выполнить 3) для каждой задачи среди тысяч доступных моделей выбирается нужная (по предоставленному описанию) 4) ChatGPT читает описание аргументов, которые нужно дать модели, и готовит их 5) после исполнения задачи ChatGPT смотрит на результат и движется по плану дальше, повторяя пункты 3-5 Для лучшего понимания можно рассмотреть скриншот из статьи со следующим запросом: "создай изображение, на котором девочка читает книгу, а ее поза такая же, как у мальчика на изображении <такое то>. А после опиши новое изображение своим голосом". Модель для такого запроса выделяет целых 6 задач (см. в красных рамках на изображении), и успешно справляется с их последовательным выполнением. Код в репозитории с очень занятным названием "Джарвис": https://github.com/microsoft/JARVIS. Наверное, это отсылка к ИИ-ассистенту из фильма "Железный Человек" :) (я бы точно так же назвал, 💯)

Маск сказал - Маск сделал Твиттер опубликовал весь исходный код системы рекомендаций площадки. Репозиторий на гите: тык Интересно, как быстро умельцы найдут баги, и сколько новой информации для себя другие компании вытащат. За ссылку спасибо каналу @j_links UPD: для мл-моделек тоже есть репозиторий.

https://youtu.be/Et4OaJmGTR0

Сегодня хочу рассказать про новый paper Inpaint Anything: Segment Anything Meets Image Inpainting который основан на модели Segment-Anything (SAM) от компании Meta. Paper представляет инструмент под названием Inpaint Anything. Этот инструмент сочетает в себе техники сегментации и восстановления изображений, облегчая работу с изображениями и упрощая процесс удаления объектов и восстановления фона. Основные возможности Inpaint Anything: - Удаление объектов (Remove Anything) - Заполнение (Fill Anything) - Замена (Replace Anything) Особенности Inpaint Anything: - Поддержка любого соотношения сторон - Поддержка разрешения до 2K Inpaint Anything представляет собой революционный подход к обработке изображений с использованием AI, который может значительно облегчить работу дизайнеров, фотографов и других специалистов, занимающихся обработкой изображений. Paper: https://arxiv.org/abs/2304.06790 Github: https://github.com/geekyutao/Inpaint-Anything #ai#inpainting