Нейросеть Facebook спрогнозировала действия музыкантов по аудиотреку

24.06.2018 22:53 0

Нейросеть Facebook спрогнозировала действия музыкантов по аудиотреку

Программа от американской компании послужит начальной точкой в освоении музыкальных инструментов с нуля. Она следит за действиями артистов, так и проецирует аватар.

Нейросеть от Facebook предсказывает передвижения музыкантов по аудиотреку. Механизм слушает музыкальную композицию и в то же время проецирует играющего треки аватара. В роли данных для обучения программисты применили видеоролики, где профессионалы играют на инструментах без аккомпанемента. На каждом кадре нейросеть определила нахождения конечностей артистов и строила модель, позже сравнив данные с частотным коэффициентом, используемым для характеристики аудиосигналов.

Аватар смог подражать музыкантам, но и даже так его движения смотрелись очень естественно. В дальнейшем технологию могут применять для обучения желающих освоить музыкальное искусство.

Источник

Следующая новость
Предыдущая новость

Ученые назвали самую грубейшую ошибку всех людей  Деловой клуб для деловых людей Путин поручил сохранить Байкал и очистить Волгу Появилось видео из Улан-Удэ, где загорелась машина «Почты России» Ученые предупредили родителей о чудовищных последствиях для детей с ожирением в младенчестве  

Лента публикаций