Исследователи из Центра искусственного интеллекта Samsung разработали алгоритм, которому для создания анимированного лица требуется только одно исходное изображение. В прошлом году на препринтном сервере arXiv была опубликована их статья.
Исследователи называют это обучением в несколько шагов, когда модель можно обучить, используя только одно изображение, чтобы создать убедительный анимационный портрет. С еще несколькими снимками реалистичность увеличивается.
Поскольку им нужен только один исходный снимок, исследователи смогли оживить картины и знаменитые портреты с жуткими результатами. Федор Достоевский, который умер задолго до того, как кинокамеры стали коммерчески доступными, передвигается и говорит черным по белому. Мона Лиза молча шевелит губами и глазами, с легкой улыбкой на лице. Сальвадор Дали бежит, усы дергаются.
Эти «фотореалистичные модели говорящих голов» созданы с использованием сверточных нейронных сетей: они обучили алгоритм на большом наборе данных видео говорящих голов с разнообразным внешним видом. В этом случае они использовали общедоступные базы данных VoxCeleb, содержащие более 7000 изображений знаменитостей из видео YouTube. Эти данные обучают программу распознавать то, что они называют «характерными» чертами лица: глаза, формы рта, длину и форму переносицы и т.д.
Вместо того, чтобы учить алгоритм вставлять одно лицо на другое, используя каталог выражений от одного человека, они используют черты лица, которые являются общими для большинства людей.
Вас также может заинтересовать:
Рост сосудов в костном мозге черепа на протяжении всей жизни приводит к увеличению выработки клеток… Читать далее
Исследование Тель-Авивского университета может изменить наше понимание того, как люди учатся и формируют память, особенно… Читать далее
Эти сайты расширят ту область, которую вы можете охватить своим взглядом в пространстве-временном континууме. Линейка… Читать далее
Новое исследование ставит под сомнение вековое представление о терпении как о моральной добродетели, показывая, что… Читать далее
3D-модели Australopithecus afarensis указывают на мышечные адаптации, которые сделали современных людей лучшими бегунами. Древние родственники… Читать далее
Ученые из Южной Кореи разработали рой крошечных магнитных роботов, которые работают вместе, как муравьи, и… Читать далее