Gemini теперь генерирует музыку по фото и видео — нейросеть создаёт саундтреки с вокалом
Google представил новую функцию в Gemini: теперь можно загружать фото или видео, а ИИ на основе модели Lyria 3 сгенерирует полноценный трек с реалистичным вокалом, оценив атмосферу контента.
- Нейросеть Gemini теперь умеет создавать музыку по загруженным фото и видео, используя обновлённую модель Lyria 3. Это позволяет ИИ анализировать визуальную атмосферу и генерировать подходящие саундтреки с качественным вокалом.
- Пользователям больше не нужно вводить текстовые промты для генерации музыки, достаточно просто загрузить медиафайл. Система автоматически определяет настроение и стиль контента, чтобы создать уникальный аудиотрек.
- Новая функция обещает реалистичный вокал и полноценные музыкальные композиции, что может быть полезно для создания саундтреков к видео или атмосферной музыки. Однако инструмент пока доступен только в рамках платной подписки на сервис Gemini.
- Модель Lyria 3 была специально доработана для улучшения качества генерации музыки и вокала на основе визуальных данных. Это делает процесс создания треков более интуитивным и быстрым для пользователей.
- Функция может найти применение в различных творческих проектах, таких как видеомонтаж, подкасты или игровая разработка. Она позволяет легко добавлять персонализированную музыку без необходимости навыков композиции.
- Несмотря на инновационность, ограничение доступа к платной подписке может стать барьером для широкой аудитории. Разработчики планируют расширять функционал и, возможно, сделать его более доступным в будущем.
