Google встроила в Gemini генератор музыки (видео)

Компания Google DeepMind представила Lyria 3 — третье поколение своей генеративной музыкальной модели. С сегодняшнего дня она работает в бета-режиме прямо внутри Gemini App: никаких отдельных сервисов, никаких плагинов.

Первые две версии Lyria требовали от пользователя готовых текстов, а модель лишь «одевала» их в музыку. Lyria 3 пишет слова сама, достаточно задать настроение, жанр или ситуацию, и система сгенерирует и мелодию. Вдобавок теперь можно управлять темпом, стилем и типом вокала — раньше такой гибкости не было. Треки стали сложнее, аранжировка глубже и реалистичнее по звуку.

Схема работы простая: вводишь запрос или загружаешь фото и видео. Например, просишь создать весёлый афробит про совместные прогулки с мамой и её фирменное блюдо — Gemini анализирует запрос, подбирает стиль, генерирует текст и накладывает всё на музыку. Результат — 30-секундный клип с автоматически нарисованной обложкой от нейросети Nano Banana. Готовую композицию можно скачать или отправить другу по ссылке прямо из интерфейса.

Если загрузить фотографию или видео, модель «читает» настроение кадра и сочиняет трек под него. Снимок собаки на горной тропе — и через несколько секунд звучит что-то между фолком и эмбиентом с соответствующими строчками. Намеренно скопировать чей-то стиль до деталей не получится. Если вписать в запрос имя конкретного артиста, Gemini использует его как общий ориентир по настроению, но не воспроизводит готовый звук. Все сделанные треки маркируются невидимым водяным знаком SynthID: он не слышен на слух, но позволяет идентифицировать происхождение файла. Тот же Gemini умеет проверять загруженные аудиофайлы и отвечать, создан ли трек с помощью Google ИИ.

Функция открылась для всех пользователей Gemini старше 18 лет на десктопе. Мобильные версии подтянутся в течение нескольких дней. Поддерживаемые языки запросов: английский, немецкий, испанский, французский, хинди, японский, корейский и португальский. Подписчики тарифов Plus, Pro и Ultra получат повышенные лимиты на количество треков. Параллельно Lyria 3 появилась в инструменте Dream Track на YouTube, он помогает авторам Shorts добавлять ИИ-музыку к коротким роликам. До этого функция работала только в США, теперь она открылась глобально.

Совсем недавно рассказывали как реалистичность ИИ заставила напрячься весь Голливуд. Подробности в статье.

<div class="mediaPollEmbed" data-prerendered><noscript><section><h2>Как хорошо вы знаете знаменательные события в истории технологий</h2><p>9 вопросов</p><form method="POST" action="https://media-poll.mail.ru/api/5fba65c9-c48a-5880-8fbd-5bd3c337bdf3"><fieldset><legend>Насколько хорошо вы разбираетесь в истории технологий?</legend><label><input type="radio" name="22855" value="83820"/>Отлично, это моя тема</label><br/><label><input type="radio" name="22855" value="83821"/>Неплохо, основные вехи знаю</label><br/><label><input type="radio" name="22855" value="83822"/>Поверхностно, что-то знаю про отдельные события</label><br/><label><input type="radio" name="22855" value="83823"/>Совсем не разбираюсь</label><br/></fieldset><button type="submit">Далее</button></form></section></noscript></div><script type="text/javascript">(function(window){var mediaPoll=(window.mediaPoll=window.mediaPoll||{});var container=document.currentScript.previousElementSibling;var uuid="5fba65c9-c48a-5880-8fbd-5bd3c337bdf3";mediaPoll.loadAPIPromise=mediaPoll.loadAPIPromise||new Promise((resolve,reject)=>{const loadScript=(onload,onerror)=>{var head=document.getElementsByTagName('head')[0];var script=document.createElement('script');script.async=true;script.onload=onload;script.onerror=onerror;script.src='https://media-poll.mail.ru/-/1771436471766/embed/main.js';head.appendChild(script)};loadScript(resolve,()=>{mediaPoll.loadAPIPromise=null;reject()})});mediaPoll.loadAPIPromise.then(()=>{window.mediaPoll.render(uuid,container)})})(window)</script>

Источник: hi-tech.mail.ru

Средний рейтинг
0 из 5 звезд. 0 голосов.