«ПТС» Официальный сайт"ПТС" Официальный сайт


 

Основные направления 

Творческая Мастерская: PR- стиль образа

Творческая мастерская.

Вся реклама.

Любой дизайн.

Торговый отдел

Торговый отдел.

Продукты питания.

Оптом + Розница.

Юридический отдел

Юридический отдел.

Защита прав.

Слияния и поглощения.

Отдел IT технологий

IT — технологии.

Реклама  IT-проектов.

Заработок в интернете.

Новости: Новости компании, в городе Омске, в мире

Новости.

Новости компании.

Горячие новости.

Реклама

Реклама!

Онлайн

Читай — смотри!

Важные событие!

Нейросеть может распознать звучание каждого пикселя на видео

1

Искусственный интеллект научился распознавать на видео отдельные музыкальные инструменты и изменять звуковую дорожку так, чтобы звучал только один из них. Пользователь может кликнуть на нужный инструмент и из всего ансамбля услышать только его. Препринт статьи с описанием разработки доступен на сайте arXiv.org.

Ученые из Массачусетского технологического института научили искусственную нейросеть находить звучание отдельных музыкальных инструментов в видеозаписях, на которых звучит несколько инструментов. Кроме того, программа может распознавать, какая часть звуковой дорожки относится к каждому из них. Разработка получила название «PixelPlayer» — подразумевается, что алгоритм распознает как «звучит» каждый пиксель видео.

Для того, чтобы обучить искусственный интеллект, ученые «показали» программе более 60 часов видео, на которых несколько людей играли на различных музыкальных инструментах. Сначала ученые вручную помечали, какие пиксели и какая часть звуковой дорожки относятся к каждому инструменту, а затем алгоритм научился делать это сам. В результате программа может распознавать около 20 самых популярных инструментов.

Для пользователя интерфейс алгоритма выглядит следующим образом: во время просмотра видео с музыкальным ансамблем можно нажать на любую точку изображения и звуковая дорожка изменится соответствующим образом. Например, если на видео два человека играют на скрипке и гитаре, и пользователь нажимает на скрипку, все остальные звуки станут тише, а мелодия скрипки — громче. Можно нажимать не только на инструменты, а вообще на любой пиксель видео. Если нажать, например, на стену, то никакого звука не будет.

Описание проекта можно почитать на сайте авторов. Там же выложены демонстрационные видео, на которых можно опробовать действие программы. По словам разработчиков, исходный код алгоритма тоже вскоре появится на странице.

Читайте также

источник

Official site

Реклама

Реклама



Президент омского «Авангарда» заявил, что конфликта в команде нет

«Спортэкспресс» опубликов

Артист Омского музыкального театра Георгий Котов получил «Золотую маску»

Артист Омского музыкального театр

Омские аграрии получили около 100 млн рублей от Сбербанка

С начала теку

Участковый, обгоревший во время ЧП в Омске: Мы вскрыли дверь и раздался взрыв

Пострадавший

Новости. Погода. Событие. Информация

Вид из Космоса.

На снимке видно комету, а также 14-метровую солнечную батарею.

MEDIA

Человечество может официально перейти в эпоху антропоцена.

Антропоценом называют геологическую эпоху, где человеческая активность играет существенную роль в экосистеме.

MEDIA


Пробоина в радиаторе МКС не вызывает опасений.

Как заявил представитель отдела по связям с общественностью космического Центра имени Джонсона Роб Нейвиес, повреждение в радиаторе МКС не оказывает влияния на работоспособность узла. Ремонта или других мероприятий не планируется.


Социальные сети.

Поделись с друзьями:

 
Яндекс.Метрика  

© 2005-2099г. "ПТС" Официальный сайт" Новости мира, региона и города! Бизнес, юристы, политика, ITтехнологии. Новости общества и человека. Отделы торговли, купить, продать, онлайн услуги и реклама.