ИИ может преобразовывать звуки в изображения с картой

ИИ может преобразовывать звуки в изображения с картой

Используя генеративный искусственный интеллект, группа исследователей Техасского университета в Остине преобразовала звуки из аудиозаписей в изображения с видом на улицу. Визуальная точность этих сгенерированных изображений демонстрирует, что машины могут воспроизводить человеческую связь между аудио- и визуальным восприятием окружающей среды. В статье, опубликованной в журнале Computers, Environment and Urban Systems , исследовательская группа описывает обучение модели искусственного интеллекта, преобразующей звуковой ландшафт в изображение, с использованием аудио- и визуальных данных, собранных с различных городских и сельских улиц, а затем использование этой модели для генерации изображений из аудиозаписей. «Наше исследование показало, что акустическая среда содержит достаточно визуальных подсказок для создания высокоузнаваемых изображений уличного пейзажа, которые точно отображают различные места», — сказал Юхао Кан, доцент кафедры географии и окружающей среды в Техасском университете и соавтор исследования. «Это означает, что мы можем преобразовать акустическую среду в яркие визуальные представления, эффективно переводя звуки в зрелища». Используя видео и аудио YouTube из городов Северной Америки, Азии и Европы, команда создала пары 10-секундных аудиоклипов и кадров изображений из разных мест и использовала их для обучения модели ИИ, которая могла создавать изображения высокого разрешения из аудиовхода. Затем они сравнили творения ИИ по преобразованию звука в изображение...
30.11.2024 - 12:19
Источник: android-robot.com  
Рубрика: «Software»   Поделиться: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Новая структура может генерировать изображения, более соответствующие ожиданиям пользователяНовая структура может генерировать изображения, более соответствующие ожиданиям пользователя Генеративные модели, искусственные нейронные сети, которые могут генерировать изображения или тексты, стали все более продвинутыми в последние годы. ...

Поисковик Яндекса теперь может рассуждать и генерировать тексты и изображения с помощью АлисыПоисковик «Яндекса» теперь может рассуждать и генерировать тексты и изображения с помощью «Алисы» Вместо появившемуся в прошлом году «Поиску с Нейро» в поисковой машине «Яндекса» теперь работает специальная версия «Ал ...

В Мелитополе раздались звуки взрывовВ Мелитополе раздались звуки взрывов В Мелитополе слышны звуки взрывов. Об этом сообщили в городской администрации. В отдельных районах Мелитополя зафиксированы отключения электроснабжен ...

Российские туристы смогли расплатиться картой Мир на МальдивахРоссийские туристы смогли расплатиться картой «Мир» на Мальдивах Российские туристы на Мальдивах сообщили о возможности оплаты с помощью карт национальной платёжной системы «Мир». По словам отдыхающих, карты стали ...

У курян не проходит оплата картой в общественном транспортеУ курян не проходит оплата картой в общественном транспорте Министерство транспорта и автомобильных дорог Курской области сообщает, что с 1 января 2025 года у части карт Visa и Mastercard истекли сертификаты б ...

На Украине переиздадут учебники с картой страны без КрымаНа Украине переиздадут учебники с картой страны без Крыма Издательство «Литера» объявило об отзыве учебников для семиклассников с картой Украины без Крыма. Учебные материалы будут перепечатаны за счет издате ...

Это подвох: что категорически нельзя делать с кредитной картойЭто подвох: что категорически нельзя делать с кредитной картой Сегодня в России очень развит рынок кредитования. Банки наперегонки предлагают кредитные карты с максимально выгодными условиями, включая беспроцентн ...

Белый дом опубликовал фото Трампа с картой ГренландииБелый дом опубликовал фото Трампа с картой Гренландии Белый дом опубликовал в соцсети X фотографию президента США Дональда Трампа на фоне карты Гренландии. "Нажмите, чтобы следить за ситуацией", - говори ...

Какие звуки издает северное сияниеКакие звуки издает северное сияние Большинство людей считают северное сияние исключительно визуальным явлением. Однако народы Севера издавна утверждали, что яркие волны зеленого, розов ...

Под Выборгом грядет неделя под звуки взрывовПод Выборгом грядет неделя под звуки взрывов С 29 июля по 1 августа с 10 утра до 17 часов дня в карьерах Каменногорского поселения будут производиться массовые взрывы. ...

Как отключить назойливые звуки кейса AirPods ProКак отключить назойливые звуки кейса AirPods Pro Одним из самых популярных новогодних подарков на протяжении последних нескольких лет остаются наушники AirPods. Однако далеко не все счастливые облад ...

Звуки зелёного рая: почему в Словении лес поётЗвуки зелёного рая: почему в Словении лес поёт В самом сердце Словении, среди Юлийских Альп, природа поёт. Не метафорически — буквально. "Зелёная симфония" — это поэтическая экскурсия, в которой л ...

☰