Тут уже несколько дней народ играется с генерацией музыки по текстовому описанию. Идея такая же, как с картинками: ты пишешь фразу, тебе нейросетка по ней создаёт трек.
На деле реализовано чуть более топорно: текстовый препроцессор разбирает фразу и ищет контекстную близость до слов из специального списка тегов. Ну, например, он считает слово "weed" (трава, конопля) близким к жанру "reggie", вот и подставляет.
Эти теги передаются в облачный API сервиса Mubert (да, никакого опенсорса на этот раз), и оно выдаёт трек.
Я попробовал тоже. По примерам из статей я уже было подумал, что окончательно решена проблема "не подобрать трек для нового видео". Но увы. Результат на деле (а не в рекламе) такой же не впечатляющий, как и с картинками.
Эта штука сносно генерирует всякие эмбиенты и другие спокойные треки, но на более сложных жанрах сразу загибается и очень сильно недокручивает и темп, и агрессию и разнообразие музыкальных фраз. Я после часа попыток не смог сделать ничего для быстрого интенсивного полёта дрона, только для плавного и медленного. Ну и очень часто неправильно улавливает контекст, даже даже открыто писать, что примерно ты от неё хочешь (вот как с треком Помпеи — вообще мимо, слишком спокойная и не грустная мелодия).
Первые два трека сгенерировал @wooferclaw. Он не хейтер ML, в отличие от меня, поэтому у него больше терпения и, вероятно, он смог дольше перебирать варианты. Но всё равно на мой взгляд какой-то намёк на правильную идею есть, а развития совсем нет.
Музыканты, можете выдохнуть.
#dev
#from#building
A series of immersive geodesic dome glamping sites, each featuring a panoramic window composed of precisely 16 equilateral triangles on the front facade. Nestled in a lush rainforest, the domes measure 6 meters in diameter and 3.5 meters in height. The transparent panoramic window provides an uninterrupted view of towering trees, vibrant flora, and the gentle trickle of a nearby waterfall. The photo captures the integration of the dome structures within the dense foliage, with the panoramic windows acting as portals into the enchanting forest. Sunlight filters through the canopy, creating a mesmerizing interplay of light and shadow within the domes. The overall ambiance is one of tranquility and harmony with nature, enticing visitors to embark on a serene glamping experience amidst the rainforest's embrace. Photography, mirrorless camera with a prime lens to capture the intricate details of the rainforest, --ar 16:9
✅ Revive Homes _Discord
@ai_artz
#from#building
A city of circular houses and community centers made out of grafted willow trees, recycled materials, and biomaterials; humans and animals coexisting amongst lush greenery and abounding nature without the presence of industrial materials
✅ nlynch00 _Discord
@ai_artz
#from#building
Floating House Visualization Amphibious design, flood-resilient construction, modular living spaces, energy-efficient technologies, solar panels, bold color accents, sustainable materials, adaptable to rising water levels, dimensions: 12m (L) x 8m (W) x 6m (H) --v 5
✅ Ahmet Ç _Discord
@ai_artz🌿
#from#building
An interior view of a Burger QSR featuring blue, orange, and white accents throughout the space. The seating area is decorated with a mix of comfortable chairs and booths, while the walls are adorned with abstract art and geometric patterns. The lighting fixtures create a warm and inviting atmosphere, complementing the vibrant color palette and fostering a sense of community.
✅ rajivkk _Discord
@ai_artz