
Исследователи из Центра искусственного интеллекта Samsung разработали алгоритм, которому для создания анимированного лица требуется только одно исходное изображение. В прошлом году на препринтном сервере arXiv была опубликована их статья.
Исследователи называют это обучением в несколько шагов, когда модель можно обучить, используя только одно изображение, чтобы создать убедительный анимационный портрет. С еще несколькими снимками реалистичность увеличивается.
Поскольку им нужен только один исходный снимок, исследователи смогли оживить картины и знаменитые портреты с жуткими результатами. Федор Достоевский, который умер задолго до того, как кинокамеры стали коммерчески доступными, передвигается и говорит черным по белому. Мона Лиза молча шевелит губами и глазами, с легкой улыбкой на лице. Сальвадор Дали бежит, усы дергаются.
Эти «фотореалистичные модели говорящих голов» созданы с использованием сверточных нейронных сетей: они обучили алгоритм на большом наборе данных видео говорящих голов с разнообразным внешним видом. В этом случае они использовали общедоступные базы данных VoxCeleb, содержащие более 7000 изображений знаменитостей из видео YouTube. Эти данные обучают программу распознавать то, что они называют «характерными» чертами лица: глаза, формы рта, длину и форму переносицы и т.д.
Вместо того, чтобы учить алгоритм вставлять одно лицо на другое, используя каталог выражений от одного человека, они используют черты лица, которые являются общими для большинства людей.
Вас также может заинтересовать:
Самки прекращают беременность после появления нового самца, что снижает риск будущего инфантицида и позволяет быстрее… Читать далее
Исследовательская группа из Института зоологии Куньмин Китайской академии наук впервые продемонстрировала на приматах, что звуковая… Читать далее
Ученые открыли революционный метод лечения, который пробуждает «ленивую» часть зрительной системы мозга взрослых особей. Исследовательская… Читать далее
Опрос 952 врачей общей практики из 21 европейской страны (и Израиля) показал, что 84 процента врачей… Читать далее
Когда дети начинают видеть сны и какие сны они видят? Поскольку дети часто проявляют эмоции… Читать далее
По мере того как легальные ставки на спорт распространяются по всей Америке, новое исследование показывает,… Читать далее