Новость

Alexander IT

Искусственный интеллект сможет восстановить музыку по видео фрагменту

Создан искусственный интеллект который может востанавливать музыку исходя из движений рук и тела музыканта!

Музыкальные инструменты
Музыкальные инструменты

Команда ученых из Массачусетского технологического университета преподнесли структуру искусственного интеллекта Foley Music. Данная модель может создавать музыку исходя из видеоролика игры на музыкальных инструментах без звука. Создатели утверждают, что данная система может работать с разными музыкальными инструментами и преобладает среди ранее изобретенных.

История создания Foley Music

Ученые взяли за основу умение человека «читать по губам». Новейшая модель искусственного интеллекта создает музыку на основе анализа движений человека и может стать отличным прототипом для новых приложений.

Foley Music расшифровывает информацию с основных частей тела и пальцев. Новая модель не только пишет полученную информацию в виде музыкальных нот, но и регулирует уровень громкости. Таким образом она может сыграть и воспроизвести скрипку, балалайку, гитару, барабан, виолончель и другие инструменты.

Экспериментальное исследование новой модели искусственного интеллекта

Ученые разработали для Foley Music три набора данных, в которых есть информация о большом количестве видеороликов с игрой на музыкальных инструментах. В результате получилось создать модель искусственного интеллекта с возможностью обработки видео различных уровней сложности.

В процессе апробирования Foley Music ученые загрузили в программу 450 видеороликов. Полученные композиции передали для анализа профессиональным музыкантам. По итогам многие отметили, что «музыка похожа на качественный кавер от профессиональной группы».

Консультанты отметили, что созданная мелодия Foley Music легко перепутать с обычной записью. Несомненным плюсом искусственного интеллекта является возможность улучшить качество звучания, временную синхронизацию и многое другое.

Читайте также: Новый инструмент по борьбе с интернет-троллями. Также ранее мы писали о том, что Налог на роботов в России — новая реальность.

Реклама на h-it.ru

Если вы нашли ошибку, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter.

Была ли эта статья полезна для Вас?

Комментарии 0

Новость Страховая компания Tesla

Новая страховая компания для владельцев Tesla

Интернет-издательство Business Insider поделилось подробностями совещания Илона Маска с инвесторами. Миллиардер объяснился о планах создать отдельную ...

  • 0
  • 25 Июля
Новость Человек следит за людьми

Правда ли то, что специальным службам в Германии будет разрешено наблюдать за людьми в интернете с помощью вируса?

Законопроект о внедрении вредоносного программного обеспечения для слежения за пользователями и предотвращения терроризма...

  • 0
  • 14 Июля
Статья WWDC 2020 Apple

Тенденции ближайшего будущего: каких изменений следует ждать от мобильных приложений?

В конце июня, с 22 по 26, Apple провел масштабную всемирную конференцию WWDC 2020. Как правило, данное событие задает мировые тенденции развития мобил...

  • 0
  • 07 Июля

Популярное

Новость Вчера в 09:30

Хакеры-миллионеры или как правильно требовать выкуп

Новость 03 Августа

Стоп анонимность! В России запретили пополнять анонимные электронные кошельки

Горячая новость 2 дня назад

В даркнет попала слитая база голосовавших по конституционным правкам. Правительство не видит ничего страшного

Обзор 2 дня назад

Усовершенствованная модель ASUS ZenBook 14

Новость 03 Августа

Компания Lenovo представила новый ноутбук с поддержкой 5G

Обзор 2 дня назад

Россия снова в погоне за Маском? Обзор нового электрокара Zetta

Новость 2 дня назад

Google представила смартфоны Pixel 5, Pixel 4A 5G и Pixel 4A

Новость 03 Августа

Космический аппарат Crew Dragon успешно приземлился

Горячая новость 2 дня назад

Последний шанс: Трамп разрешил американским компаниям купить TikTok

Новость 03 Августа

Правительство запретит китайским геймерам проводить за играми больше 3 часов в день

Вход

Нет аккаунта? Зарегистрироваться

Забыли пароль?

Войти с помощью

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам:

Вход

Уже зарегистрированы? Вход

Нажимая на кнопку «Зарегистрироваться», вы даете Согласие на обработку персональных данных и принимаете Условиями использования

Зарегистрироваться с помощью

Сброс пароля

На Ваш Email адресс выслано письмо для подтверждения смены пароля

Главная

Сброс пароля

На Ваш Email адресс выслано письмо для подтверждения смены пароля

Сбросить