Говорит и показывает Мона Лиза

Российские разработчики из компании Samsung и Сколковского института науки и технологий сумели буквально "оживить" фотографии, портреты и картины, наделить их движениями и даром речи.

Для создания модели говорящей головы нейронную сеть сначала пришлось учить с помощью череды кадров с изображением различных людей, а затем алгоритм можно было использовать для оживления конкретного портрета. Для обучения нейросети в качестве входных данных использовались интервью со знаменитостями.

Уникальная маска позволила переносить информацию между объектами, используя лишь один или два кадра

Созданная в результате обучения маска накладывается на говорящую голову и создает границы лица и базовую мимику. Связь маски с исходным вид...