PHYGITAL+CREATIVE

Мы научимся сейчас создавать с помощью AI такие AR-фильтры) пишите вопросы в тред

Вот видос с разбором как такое самому сделать: https://www.youtube.com/watch?v=kmT-z2lqEPQ&ab_channel=SECourses

контролнет вымахал, ещё вчера на руках носил https://t.me/Psy_Eyes/649

ControlNet версии 1.1 - предварительный релиз. Товарищ lllyasviel продолжает докручивать свой великолепнейший алгоритм по контролю над SD. Поставить его можно уже сейчас, но только отдельным интерфейсом отсюда. Сам релиз и его имплементация к автоматику планируется в ближайшие несколько дней. Итак, по новшествам. — Итого, теперь будет 14 моделей (11 готовы, две экспериментальных и 1 в процессе). — Естественно, все старые модели ещё больше улучшены. — Новые модельки: Soft Edge (наподобие Scribble, но более "мягкий" в линиях), Lineart и Аниме Lineart (раскрашивать мангу/рисунки теперь можно будет на высшем уровне), Shuffle (перемешивает цвета в картинке), Instruct Pix2Pix (аналогично весам инструкций), а так же Инпаинтая модель (для перерисовки части рисунка контролнета) и незавершённая Tile-модель (повышение разрешения части рисунка). — Модель ОпенПоз теперь включает руки и лицо по умолчанию, из коробки.

Новьё по Segment Anything (SAM): Сегментация объекта на разных фото через SegGPT. Выделяешь маской пример на одной картинке в качестве промта, а дальше объект вычленяется на картинках с разным контекстом. Демо — Гитхаб — Бумага Segment Anything Video: выделение частей объекта на видео. Демо

Таблица фотографов, которые есть в датасете Midjourney v5, для создания более качественных промтов. Объемная, референсы сгенерированы по запросам photo, portrait, street. Собираю помощники для промтов и таблицы с референсами в канале, прошлые подборки можно посмотреть тут. Важно, что таблицы обновляются под новые версии нейросети.

Alibaba Cloud представили свою версию ChatGPT под названием Tongyi Qianwen. Она будет интегрирована во все бизнес-приложения в экосистеме Alibaba, чтобы улучшить пользовательский опыт в разных сферах: корпоративные коммуникации, голосовые помощники, электронная коммерция, поиск, навигация и развлечения. Компания предоставит своим клиентам и разработчикам доступ к модели, чтобы создавать на ее основе AI-проекты на выгодных условиях. для этого Alibaba представили новые дешевые тарифные планы для своих облачных решений. Модель будет первоначально внедрена на DingTalk — платформе для совместной разработки приложений, а также в Tmall Genie — ассистенте вроде Алисы, который живёт в умных бытовых приборах Alibaba Group. Функционал будет расширяться и позже подъедет мультимодальность для text-2-image. Анонс

WebGPU API — ещё больше мощности от видеокарты для браузера Google Chrome спустя годы разработки начал поддерживать WebGPU — новый стандарт веб-графики, который позволит Хрому намного эффективнее использовать видеокарту. Обновление станет дефолтным в новой версии браузера, которая выйдет в ближайшие недели. Firefox и Safari также скоро внедрят стандарт. Вот хороший explainer от веб-разработчика. Вкратце, WebGPU откроет дорогу двум направлениям: - ML прямо в браузере — скорость вычислений возрастает до 3 раз, по сравнению со старым стандартом WebGL. Уже появляются порты Stable Diffusion для браузера. Также получат буст сервисы веб-конференций с ML-фичами (наложение фона, аватарки и т.п.) - Браузерные игры с высокими графическими требованиями. Уже есть игры аля «браузерный Fortnite», а WebGPU поможет портировать в веб ещё более требовательные.

Самый простой способ запустить альтернативу GPT-4 локально у себя на компьютере. ❗️Напоминаю что все что вы скачиваете из интернета, вы скачиваете на свой страх и риск. Загружаем файл koboldcpp.exe с GitHub Идем сюда и выбираем подходящую нам модель формата ggml: — LLaMA — исходная слитая модель от Meta. Не обучена и практически без цензуры; — Alpaca — самая привлекательная модель, дотренированная на данных с инструкциями версия LLaMA. Рекомендуем GPT4xAlpaca; — Vicuna — та же LLaMA, но тренировали ее на диалогах с ChatGPT. Максимально на него похожа, в том числе цензурой. Учтите, что у моделей разное количество параметров (7B, 13B и т.д.) — чем их больше, тем лучше, но чат-бот будет отвечать дольше, возрастет и нагрузка на процессор и ОЗУ. Загружаем понравившуюся модель. Запускаем koboldcpp.exe и в появившимся окне указываем путь к загруженной модели (желательно без кириллицы). Спустя некоторое время в командной строке появится адрес «http://localhost:5001/» — открываем в браузере и наслаждаемся

https://youtu.be/ajyL9FyN-pw

ктоумеетработатьвitsclo3d, есть потенциальный проект для вас. напишите в комментарии, свяжу

В общем, протестировал я Plask из предыдущего поста. Чуда нет. Там просто вебморда к Stable Diffusion с ControlNet. 1. Также портит лица при использовании КонтролНет. 2. КонтролНет не умеет в сложный скелет, здесь это прям видно. 3. Похоже там ванильная Stable Diffusion 1.5 - качество ну такое. NSFW фильтров нет. 4. С пальцами беда. 5. В общем это как бы препроцессор к OpenPose, который ковертит позу из Пласка в КонтролНетовский скелет и тупо отдает это в Stable Diffusion+ControlNet 6. Глубины там нет похоже, возможно появится. 7. Свои модели пристегнуть нельзя. В общем ребята собрали игрушку из готовых компонентов и дают поиграть, чтобы привлечь внимание к основному продукту по мокапу. Жгут электричество, судя по скорости рендера (10 минут на 4 картинки). Пока расходимся, все это можно сделать в Automatic1111 в 10 раз быстрее, если забирать отсюда скелет и глубину скриншотом. Была надежда на работу с пальцами, но нет. Больше трешовых картинок в коментах.