Исследователи из Центра искусственного интеллекта Samsung разработали алгоритм, которому для создания анимированного лица требуется только одно исходное изображение. В прошлом году на препринтном сервере arXiv была опубликована их статья.
Исследователи называют это обучением в несколько шагов, когда модель можно обучить, используя только одно изображение, чтобы создать убедительный анимационный портрет. С еще несколькими снимками реалистичность увеличивается.
Поскольку им нужен только один исходный снимок, исследователи смогли оживить картины и знаменитые портреты с жуткими результатами. Федор Достоевский, который умер задолго до того, как кинокамеры стали коммерчески доступными, передвигается и говорит черным по белому. Мона Лиза молча шевелит губами и глазами, с легкой улыбкой на лице. Сальвадор Дали бежит, усы дергаются.
Эти «фотореалистичные модели говорящих голов» созданы с использованием сверточных нейронных сетей: они обучили алгоритм на большом наборе данных видео говорящих голов с разнообразным внешним видом. В этом случае они использовали общедоступные базы данных VoxCeleb, содержащие более 7000 изображений знаменитостей из видео YouTube. Эти данные обучают программу распознавать то, что они называют «характерными» чертами лица: глаза, формы рта, длину и форму переносицы и т.д.
Вместо того, чтобы учить алгоритм вставлять одно лицо на другое, используя каталог выражений от одного человека, они используют черты лица, которые являются общими для большинства людей.
Вас также может заинтересовать:
По мере того как легальные ставки на спорт распространяются по всей Америке, новое исследование показывает,… Читать далее
Бактерия из кишечника древесных лягушек продемонстрировала «необычайно мощные» способности уничтожать опухоли при внутривенном введении, превосходя… Читать далее
Согласно новому метаанализу, опубликованному в Journal of Sport and Health Science, каждое повышение температуры мышц… Читать далее
От утверждений о том, что вакцины не работают, до манипулированных изображений и намеренного искажения слов… Читать далее
Исследование, опубликованное в журнале Age and Ageing пару недель назад, показало, что пожилые люди, употреблявшие… Читать далее
Многим знакома ситуация, когда после бессонной ночи вы не чувствуете себя бодрым, как обычно. Мозг… Читать далее