Описание: Imaginary Soundscape – это веб-основанная звуковая инсталляция, которая позволяет пользователям свободно перемещаться по Google Street View и погружаться в мир воображаемых звуковых пейзажей, генерируемых с помощью моделей глубокого обучения. Этот проект нацелен на неосознанное поведение человека, когда мы можем представить звуки, просто взглянув на фотографию.

Цена: Судя по всему, это бесплатное решение, доступное для публичного использования. Однако Qosmo, Inc. предоставляет лицензию на эту технологию, img2sound Engine, компаниям, которые хотят использовать ее в своих продуктах и услугах.

Тип решения: Онлайн-платформа.

Возможности: Imaginary Soundscape использует кросс-модальную технику информационного поиска, такую как image-to-audio и text-to-image, с использованием глубокого обучения. На основе видеовхода система обучена двум моделям: одна предварительно обученная модель распознавания изображений обрабатывает кадры, в то время как другая сверточная нейронная сеть читает аудио в виде спектрограммы изображений. Это позволяет пользователям находить наилучший подходящий звуковой файл для сцены из огромного набора данных об окружающей среде.

AI, звуковые пейзажи, генерация музыки, Imaginary Soundscape, аудиоанализ, анализ изображений, Google Street View, звуковое сопровождение, aisearch.