PHYGITAL+CREATIVE

Вышла нейросеть, которая заменит разработчиков приложений Функционирует как конструктор, в котором вы можете создать собственное приложение на базе ИИ за пару кликов Кроме того, нейронка дружит с любым видом контента — тексты, видео, картинки и даже 3D-модели Выглядит очень интересно, вступаем в лист ожиданиятут

Поигрался с новым алгоритмом Bark для озвучки текста: в отличии от других доступных алгоритмов, этот умеет и в придыхания, и в копирование голоса (но в коде написано, что как-то ограничили эту функцию из-за этических рисков), и в кучу языков, и даже в пение (!), и все это работает довольно быстро. Что мне больше всего понравилось, что можно в модель передавать помимо текста – эмоции которые алгоритм попробует озвучить. Я протестировал все голоса доступные на русском, и мне кажется лучше всего справились голоса 3 и 5. В общем, собрал все тесты в видео, где этот алгоритм озвучил пикап лайны из моего прошлого поста. ✨ Поиграться онлайн | Исходный код Для тех кто доберется поиграться сам, передавайте это вместе с текстом: [laughter] или [laughs] - и диктор засмеется во время озвучки, [sighs] или [gasps] - озвучит вздох или испуг, [music] - будет музыкальная вставка (не очень хорошо работает), [clears throat] - и диктор прочистит горло, — или ... и нейронка "запнется", как человек, ♪ и нейронка попробует напеть текст, работает не очень стабильно. А если выделить капсом, то алгоритм сделает акцент на этом слове. Я некоторым людям скидывал первый фрагмент из видео, и они подумали что это мой голос ☕️ что забавно - в видео нет настоящих людей. Как по мне, сильная заявка на «Лучший опенсорс алгоритм озвучки 2023»

https://youtu.be/X1NIjn_kJq8

Новые интересные инструменты и проекты в области генеративного AI. Мой Top10 за прошлую неделю 1. AutoGPT — cоздавай своих AI-агентов (ссылка) и удобная демка (ссылка) 2. Review Hero — суммаризатор отзывов на товар на Amazon (ссылка) 3. HomeByte — дизайн интерьера с помощью AI. (ссылка) 4. VideoCrafter — текст в видео (ссылка) 5. AiScrapper — парсер данных с AI-помощником (ссылка) 6. Chat YouTube — задавай вопросы по выбранному Youtube-ролику (ссылка) 7. Corpora — чат и поиск по корпоративным документам (ссылка) 8. Decoherence — создание видео из текста с разными спецэффектами (ссылка) 9. Fliki — текст из видео с озвучкой (ссылка) 10. Kanaries AI — анализ и визуализация данных с помощью AI (ссылка) P.S. Ненавязчивая напоминалка: в этот четверг, 20-го апреля, начинается курс по ChatGPT. Сделаете 10 проектов за 8 недель, с нуля, без навыков программирования. Успейте записаться (ссылка) @daily10

Только что на techcrunch опубликовали новые плюшки от Adobe, с их новыми нейроинструментами. Все изменения касаются работы с видео и это круто! 1. Появится колоргрейдинг по текстовому описанию. Ну тут не особо удивительно, т.к. подобные инструменты были довольно давно, хоть теперь эта фича и работает с сегментацией, т.е. можно отдельно догрейдить лица и т.д. 2. Другие функции, включают возможность генерировать пользовательские звуки и музыку. Firefly также поможет создавать субтитры, логотипы и заголовки. 3. И создавать превизы по сторибордам! А вот тут интересно, потому что эта штука будет работать с генерацией сцены в трехмерном представлении. Скорее всего ассеты будут набираться из их собственного стора, но на сколько он будет обширный, не понятно. Сорс

🔄Самый полезный гайд по GPT: как использовать его на все 100% Революция ChatGPT продолжается. И вместе с тем спрос пользователей на то, как же правильно пользоваться чатом, чтобы задействовать все его мощности. Мы собрали для вас инструкцию с лайфхаками, советами и секретными кодами, как получить максимально точный ответ под ваш запрос. Сохраняйте и делитесь! (Все ссылки внутри кликабельны) 👍🏻 — если было полезно Инновации Москвы

В этой диаграмме отлично отражены все самые известные AI-решения.

⚡️Amazon мощно заявил о себе в гонке генеративных ИИ ⚡️ предоставив бесплатный доступ к своему AI-ассистенту по программированию CodeWhisperer🤖 (бесплатный аналог Copilot X от Microsoft) - поддерживает множество языков программирования, интегрируется с различными средами разработки (IDE) и фильтрует предложения кода. Кроме того, Amazon представил Bedrock - инновационный инструмент для создания и масштабирования генеративных ИИ-приложений. Он включает базовые модели от стартапов, таких как AI21 Labs, Anthropic и Stability AI, что позволит разработчикам строить свои приложения на основе передовых ИИ-технологий. Эти новости подчеркивают амбиции Amazon на рынке искусственного интеллекта, где компания стремится конкурировать с гигантами, такими как Microsoft, Google, OpenAI. Разработчики теперь могут расчитывать на более доступные и продвинутые инструменты, которые помогут ускорить и упростить процесс разработки программного обеспечения🤓

ControlNet с человеческим лицом. И телом. Я вот тут приподвзвывал о том, что рано или поздно вся это возня со спичками и точками в крошечном окне ControlNet должна превратиться в удобные инструменты с камерой, костями, кинематикой и прочим ригом. И пока Автодеск, Максон и даже Миксамо корпоративно отмалчиваются, на сцену выскакивают новые игроки. Я уже много писал про PlaskAI - это один из популярных нейромокапов. Снимаешь себя на камеру, а он выдает твой скелет в 3Д с анимацией. Примерно то, что делает OpenPose(в кишках контролнета), но только не с одним кадром, а с видео. Ну и, конечно, они подсуетились и сварганили на базе Stable Diffusion генератор картинок с удобным(условно, на безрыбье) редактором поз. Регистрация гуглом проходит. А дальше набор стандартных опций. Пять сэмплеров, негативный промпт. Зачатки стилей и пресетов. Что-то типа PlaygroundAI только с редактором поз. Денег пока не берут, но сервера у них стонут и кряхтят, очень медленно. Го тестировать Доки и видео тут: https://docs.plask.ai/ Генерилка тут: Иногда глючит и отправляет в корень сайта, тогда нужно выбрать готовую работу и сказать "добавить в мой воркспейс". https://plask.ai/

​​Prompt Engineering Guide. Кроме шуток, но при использовании LLM в особенности в пользовательских интерфейсах типа ChatGPT особое значение имеет промпт. Иногда бывает, что ты задаешь вопрос и попадаешь под ограничение модели – это может быть ограничение восприятия, потому что ты неправильно задаешь вопрос. Делюсь с вами ссылкой на бесплатный и очень классный гайд (прям пошагово можно кликать, мне очень зашло так) на тему промптинга. Полезно и если вы сложные вещи просите (писать код вам) и даже более-менее простые, но с определенной логикой. Сайт: https://www.promptingguide.ai/introduction/basics Github: https://github.com/dair-ai/Prompt-Engineering-Guide Заскринил вам секцию, где начинаются техники промптинга. А слева еще и видны модели, для которых такие техники подходят. Ну чтобы вы понимали, что это не только ChatGPT: – Flan – ChatGPT – LLaMA – GPT-4 – 46(!) других моделей Почему именно сейчас решил написать? Я недавно подписался на очень прикольный канал “Мысли Рвачева” @rvnikita_blog, почитал про автора, посмотрел пару постов и решил остаться. Потом он опубликовал пост (https://t.me/rvnikita_blog/358) на тему промптинга как раз тогда, когда я проверял (и довольно успешно, но кустарно) одну тему с ChatGPT. Я отметил его себе. А потом мой любимый канал @theedinorogblog Димы Филонова в подборке сказал, что кто-то подсуетился и стал продавать курсы, как пользоваться ChatGPT. И меня триггернуло, я подумал, ну вот вам гайд, как писать промтпы туда – бесплатно, и выглядит супер просто! К слову, канал “Мысли” я подсмотрел также у Димы в посте (https://t.me/Theedinorogblog/4468), где его подписчики делились своими каналами. Я посмотрел не все, конечно, но многие. Так что вдвойне все связано. @proVenture #ai#полезное

https://www.youtube.com/watch?v=oEtroSGcIhk

Новыерелизы в text-2-image Месяц выдался насыщенным на нейросетки для генерации картинок: - Stability AI выпустили превью новой модели под названием SDXL. Она умеет в текст на фото + гораздо лучше рисует портреты и руки-ноги. Модель ещё в процессе обучения, но уже можно затестить в Dreamstudio. - Midjourney обновились до v5 — детализация изображений стала ещё выше, также частично решили проблему с пальцами. Из новых фич — команда Describe, которая подбирает нужный промт к заданной фотке. Однако теперь Midjourney за пейволлом - бесплатные генерации убрали. - Adobe представили свою модель Firefly, которую планируют внедрить в Photoshop и Illustrator. Уже сейчас можно протестировать их text-2-image, а в скором времени обещают много интересного: работу с текстами и логотипами, text-to-vector и генерацию на базе ваших изображений. - Сбер зарелизил Kandinsky 2.1 — качество генерации заметно выросло, также прикрутили встроенный редактор изображений. Потестить можно в тг-боте. - Яндекс представил ещё одну русскоязычную модель Шедеврум. Похуже чем у Сбера, но обещают развивать. В комментариях традиционно обсуждаем возможности для стартеров, релевантные тренду.