Исследователи из Центра искусственного интеллекта Samsung разработали алгоритм, которому для создания анимированного лица требуется только одно исходное изображение. В прошлом году на препринтном сервере arXiv была опубликована их статья.
Исследователи называют это обучением в несколько шагов, когда модель можно обучить, используя только одно изображение, чтобы создать убедительный анимационный портрет. С еще несколькими снимками реалистичность увеличивается.
Поскольку им нужен только один исходный снимок, исследователи смогли оживить картины и знаменитые портреты с жуткими результатами. Федор Достоевский, который умер задолго до того, как кинокамеры стали коммерчески доступными, передвигается и говорит черным по белому. Мона Лиза молча шевелит губами и глазами, с легкой улыбкой на лице. Сальвадор Дали бежит, усы дергаются.
Эти «фотореалистичные модели говорящих голов» созданы с использованием сверточных нейронных сетей: они обучили алгоритм на большом наборе данных видео говорящих голов с разнообразным внешним видом. В этом случае они использовали общедоступные базы данных VoxCeleb, содержащие более 7000 изображений знаменитостей из видео YouTube. Эти данные обучают программу распознавать то, что они называют «характерными» чертами лица: глаза, формы рта, длину и форму переносицы и т.д.
Вместо того, чтобы учить алгоритм вставлять одно лицо на другое, используя каталог выражений от одного человека, они используют черты лица, которые являются общими для большинства людей.
Вас также может заинтересовать:
Многим знакома ситуация, когда после бессонной ночи вы не чувствуете себя бодрым, как обычно. Мозг… Читать далее
Известно, что некоторые виды кукушек являются паразитами, поскольку не высиживают яйца, а тайно подкладывают их… Читать далее
Комары распространяют многие смертельные заболевания, в том числе малярию, и ученые давно ищут способы лечения… Читать далее
Введение: от эксперимента к корпоративной стратегии За последние годы биткоин перестал быть нишевым активом и… Читать далее
Когда ваша логистическая компания решает, какую tms система купить, вопрос цены встает ребром. Истинная tms… Читать далее
Ученые, которые получили печально известную Шнобелевскую премию 2024 года за «открытие того, что многие млекопитающие… Читать далее