Разработан персонализированный алгоритм состаривания лица
Исследователи из Университета Северной Каролины в Чапел-Хилле (UNC) и Мэрилендского университета в Колледж-Парке разработали MyTimeMachine (MyTM) — новый метод персонализированной трансформации возраста на основе искусственного интеллекта, который может состарить или омолодить лица на фото и видео с учетом субъективных возрастных факторов.
Алгоритм, описанный в статье на сервере препринтов arXiv, предназначен для создания приложений, ориентированных на потребителя, но вполне может стать основой профессионального инструмента для индустрии кино, телевидения и развлечений.
«Техники виртуального старения широко используются в визуальных эффектах в фильмах, но они требуют тщательного грима, который актерам часто утомительно и неудобно наносить постоянно во время съемок. Вдохновил нас на эту работу фильм 2019 года "Ирландец", в котором использовались новаторские визуальные эффекты для цифрового омоложения актеров. Результат получился впечатляющим, но он потребовал значительных ручных усилий, высоких затрат и существенных вычислительных ресурсов, что ограничивает его более широкое применение», — рассказала доцент кафедры компьютерных наук UNC Рони Сенгупта.
Разработка не имеет ничего общего с популярными фильтрами для соцсетей, которые для омоложения просто размывают изображения, а для состаривания дорисовывают морщины. Реальное старение изменяет форму лица вместе с текстурой и сильно зависит от различных факторов — таких как этническая принадлежность, пол, генетика, образ жизни и состояние здоровья. Чтобы добиться максимально реалистичного результата, который можно получить в полностью автоматическом режиме, применен метод с использованием генеративной нейросети, который имитирует всю жизнь человека — от молодости до старости — на основе ограниченного набора селфи.
«Самым заметным достижением MyTM можно назвать его способность производить последовательные, реалистичные симуляции старения из ~50 селфи», — похвалился Лучао Ци, аспирант UNC, возглавляющий проект.
Применением своего детища разработчики видят прежде всего кинематограф: на искусственно состаренных героев низкобюджетных фильмов стыдно смотреть, а визуальные эффекты в блокбастерах требуют немыслимых денег и времени.
«Наш метод может сделать эффекты старения доступными и высококачественными для всех видов создателей контента и кинопроизводителей», — подчеркнул Ци.
Алгоритм будет подвергаться дальнейшим усовершенствованиям и улучшениям. «В настоящее время для модели требуется около 50 изображений, но мы планируем усовершенствовать систему, чтобы она эффективно работала всего с несколькими фото, сохраняя при этом их качество», — поделилась Сенгупта.
Среди других возможных применений разработки — медицина, маркетинг и психологическая поддержка людей, потерявших близкого родственника — такие запросы авторы уже получали.
