Нейросеть научилась рисовать портреты со слов
Хотя нейросети не считаются полноценным искусственным интеллектом, поскольку они обучаются на основе заданных им алгоритмам и библиотекам, которые им предоставили, они все равно демонстрируют удивительные результаты, которые приближают их к настоящему машинному разуму.
Разработчик Анимеш Карневар создал нейросеть под названием T2F, которая генерирует портреты на основе текстового описания лица человека. Автор заявил, что при разработке нейросети был простой интерес что же из этого получится.
Для разработки Карневар использовал набор данных Face2Text с 400 изображениями и текстовыми описаниями. Эти данные использовались для обучения нейросети. Сама же F2T базируется на архитектурах StackGAN и StackGAN++.
Нейросеть кодирует текстовое описание, после чего производится обработка изображения. На выходе получается четкая картинка. И хотя результат пока "не дотягивает" до полноценного фото или даже рисунка, основа создана, а постоянное улучшение алгоритма лишь улучшит общий вид конечного результата.
В перспективе подобные технологии могут найти применение в играх, кино и так далее, где достаточно будет ввести в систему текстовое описание внешности и затем скорректировать итоговое изображение, если что-то не понравится, существенно уменьшая затраты и время на изменения внешнего вида персонажа или актера.
