«Совсем как живой»: Российская нейросеть «оживила» портрет Достоевского
Портрет классика русской литературы начал двигаться и разговаривать.
Российскими разработчиками создан алгоритм способный преображать статичные изображения в анимированные. Система берет за основу видео с изображенным на ним человеком и снимает маску его лица. Далее алгоритм считывает лицо с фото или даже портрета и накладывает его поверх маски. Так, российская нейросеть по сути "оживила" портрет Достоевского, который на анимации "совсем как живой".
Такая работа крайне непростая, а, чтобы наложить поверх анимации аудиоряд с произносимым текстом необходимо очень точно следить за мимикой и соответствием с движением губ на картинке. Алгоритм нейросети постоянно обучается на собранных и размеченных моделях.
Основная проблема алгоритма заключается в необходимости считывания информации с минимального количества полученных кадров. В этом ученым из "Сколково", под руководством Егора Захарова, помогают разработчики Samsung. Разработанный специалистами алгоритм научился использовать только 2 изображения - исходного и цели для анимации.
В результате получаются способные двигаться "говорящие головы". Пользователи сети уже заинтересовались в "оживлении" других представителей русской классики.
