Apple
$186.31
-0.36%
Google
$1066.36
-1.13%
Facebook
$182.68
-0.59%
Amazon
$1574.37
-0.47%
Netflix
$324.18
-0.32%
Tesla
$276.82
-2.71%
Microsoft
$96.36
+0.19%
Intel
$53.50
-2.39%
Yandex
$33.99
-0.23%

Нейросеть Facebook спрогнозировала действия музыкантов по аудиотреку

Нейросеть Facebook спрогнозировала действия музыкантов по аудиотреку

Программа от американской компании послужит начальной точкой в освоении музыкальных инструментов с нуля. Она следит за действиями артистов, так и проецирует аватар.

Нейросеть от Facebook предсказывает передвижения музыкантов по аудиотреку. Механизм слушает музыкальную композицию и в то же время проецирует играющего треки аватара. В роли данных для обучения программисты применили видеоролики, где профессионалы играют на инструментах без аккомпанемента. На каждом кадре нейросеть определила нахождения конечностей артистов и строила модель, позже сравнив данные с частотным коэффициентом, используемым для характеристики аудиосигналов.

Аватар смог подражать музыкантам, но и даже так его движения смотрелись очень естественно. В дальнейшем технологию могут применять для обучения желающих освоить музыкальное искусство.

Источник

Следующая новость
Предыдущая новость

Ученые рассказали, как навсегда можно избавиться от диабета Разработана научная модель, предсказывающая, какие животные вирусы могут распространяться среди людей Женщины назвали 10 настоящих причин отказа от секса Виртуальная реальность против аутизма: VR спасла людей с нервными расстройствами от фобий «Добро пожаловать в будущее»: Робота научили нарезать овощи для скорого участия в военных действиях - сеть

Лента публикаций