Команда Google Magenta представила экспериментальное приложение Lyria Camera, которое создаёт музыку на основе изображения с камеры.
Приложение анализирует видео с камеры и с помощью Gemini описывает сцену текстовыми музыкальными промтами, например, «спокойный городской пейзаж».
Эти промты используются для создания музыки в реальном времени. Приложение подстраивает музыку под кадр и движение в реальном времени.
Lyria RealTime создаёт музыку без слов, но с частотой 48 Гц. Сгенерированные треки можно скачать и использовать в своих проектах.
Приложение Lyria RealTime доступно бесплатно в веб-версии Google AI Studio, но работает только с зарубежным IP-адресом. [Google Magenta]
1
