Apple
$186.31
-0.36%
Google
$1066.36
-1.13%
Facebook
$182.68
-0.59%
Amazon
$1574.37
-0.47%
Netflix
$324.18
-0.32%
Tesla
$276.82
-2.71%
Microsoft
$96.36
+0.19%
Intel
$53.50
-2.39%
Yandex
$33.99
-0.23%

Нейросеть Facebook спрогнозировала действия музыкантов по аудиотреку

Нейросеть Facebook спрогнозировала действия музыкантов по аудиотреку

Программа от американской компании послужит начальной точкой в освоении музыкальных инструментов с нуля. Она следит за действиями артистов, так и проецирует аватар.

Нейросеть от Facebook предсказывает передвижения музыкантов по аудиотреку. Механизм слушает музыкальную композицию и в то же время проецирует играющего треки аватара. В роли данных для обучения программисты применили видеоролики, где профессионалы играют на инструментах без аккомпанемента. На каждом кадре нейросеть определила нахождения конечностей артистов и строила модель, позже сравнив данные с частотным коэффициентом, используемым для характеристики аудиосигналов.

Аватар смог подражать музыкантам, но и даже так его движения смотрелись очень естественно. В дальнейшем технологию могут применять для обучения желающих освоить музыкальное искусство.

Источник

Следующая новость
Предыдущая новость

Ученые: Динозавры вновь появятся на Земле Новинки в мире автомобилей для любителей электромобилей Учёные: новый белок сможет образовывать нейроны в искусственной среде Ученые впервые засняли формирование джета черной дыры Учёные обнаружили уникальную звёздную систему

Лента публикаций