Новость

Alexander IT

Искусственный интеллект сможет восстановить музыку по видео фрагменту

Создан искусственный интеллект который может востанавливать музыку исходя из движений рук и тела музыканта!

Музыкальные инструменты
Музыкальные инструменты

Команда ученых из Массачусетского технологического университета преподнесли структуру искусственного интеллекта Foley Music. Данная модель может создавать музыку исходя из видеоролика игры на музыкальных инструментах без звука. Создатели утверждают, что данная система может работать с разными музыкальными инструментами и преобладает среди ранее изобретенных.

История создания Foley Music

Ученые взяли за основу умение человека «читать по губам». Новейшая модель искусственного интеллекта создает музыку на основе анализа движений человека и может стать отличным прототипом для новых приложений.

Foley Music расшифровывает информацию с основных частей тела и пальцев. Новая модель не только пишет полученную информацию в виде музыкальных нот, но и регулирует уровень громкости. Таким образом она может сыграть и воспроизвести скрипку, балалайку, гитару, барабан, виолончель и другие инструменты.

Экспериментальное исследование новой модели искусственного интеллекта

Ученые разработали для Foley Music три набора данных, в которых есть информация о большом количестве видеороликов с игрой на музыкальных инструментах. В результате получилось создать модель искусственного интеллекта с возможностью обработки видео различных уровней сложности.

В процессе апробирования Foley Music ученые загрузили в программу 450 видеороликов. Полученные композиции передали для анализа профессиональным музыкантам. По итогам многие отметили, что «музыка похожа на качественный кавер от профессиональной группы».

Консультанты отметили, что созданная мелодия Foley Music легко перепутать с обычной записью. Несомненным плюсом искусственного интеллекта является возможность улучшить качество звучания, временную синхронизацию и многое другое.

Читайте также: Новый инструмент по борьбе с интернет-троллями. Также ранее мы писали о том, что Налог на роботов в России — новая реальность.

Реклама на h-it.ru

Если вы нашли ошибку, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter.

Была ли эта статья полезна для Вас?

Комментарии 0

Новость Страховая компания Tesla

Новая страховая компания для владельцев Tesla

Интернет-издательство Business Insider поделилось подробностями совещания Илона Маска с инвесторами. Миллиардер объяснился о планах создать отдельную ...

  • 0
  • 25 Июля
Новость Человек следит за людьми

Правда ли то, что специальным службам в Германии будет разрешено наблюдать за людьми в интернете с помощью вируса?

Законопроект о внедрении вредоносного программного обеспечения для слежения за пользователями и предотвращения терроризма...

  • 0
  • 14 Июля
Статья WWDC 2020 Apple

Тенденции ближайшего будущего: каких изменений следует ждать от мобильных приложений?

В конце июня, с 22 по 26, Apple провел масштабную всемирную конференцию WWDC 2020. Как правило, данное событие задает мировые тенденции развития мобил...

  • 0
  • 07 Июля

Популярное

Новость 21 Октября

Fortnite стал на 60 ГБ меньше весить, благодаря оптимизации Epic

Новость 21 Октября

Tesla Cybertruck все еще пользуется бешеным спросом

Обзор 2 дня назад

Обзор Apple Watch Series 6: минутное улучшение не стоит таких денег

Новость 21 Октября

В “Одноклассниках” появятся “Истории”, как в Instagram

Новость 21 Октября

Apple и Google заключили договор, из-за которого Google стал доминирующей поисковой системой

Новость 2 дня назад

Бывший генеральный директор Google, Эрик Шмидт, считает социальные сети “усилителями для идиотов”

Новость 2 дня назад

PayPal подарил Биткоинам второй шанс

Новость Вчера в 10:00

Для игры в Minecraft в 2021 году потребуется зарегистрировать учетную запись Microsoft

Новость 21 Октября

Удар в сторону Apple: Xiaomi сократит количество пластика в упаковке смартфонов на 60%, не трогая комплект

Новость 2 дня назад

Facebook запустил приложение для знакомств Facebook Dating в Европе

Вход

Нет аккаунта? Зарегистрироваться

Забыли пароль?

Войти с помощью

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам:

Вход

Уже зарегистрированы? Вход

Нажимая на кнопку «Зарегистрироваться», вы даете Согласие на обработку персональных данных и принимаете Условиями использования

Зарегистрироваться с помощью

Сброс пароля

На Ваш Email адресс выслано письмо для подтверждения смены пароля

Главная

Сброс пароля

На Ваш Email адресс выслано письмо для подтверждения смены пароля

Сбросить