Улучшить лицо на фото: что делают нейросети и где граница

Кратко. «Улучшить лицо на фото» значит одну из двух задач. Если лицо размыто, нужна модель восстановления лица: она возвращает резкость, но дорисовывает черты по памяти о чужих лицах. Если лицо резкое, но не нравится кожа или цвет, нужна точечная ретушь и правка баланса белого. На очень плохом исходнике честнее переснять.

Улучшить лицо на фото: сначала пойми, что чинишь

Представь два снимка. На первом ты с друзьями в баре, фото с чужого телефона, лицо мутное, как через запотевшее стекло. На втором ты при дневном свете, всё резко, но кожа красная после бритья, а весь кадр отдаёт жёлтым от лампы. Оба случая люди называют «улучшить лицо на фото», и лечатся они совсем разными инструментами.

Про качество всего кадра, шум и увеличение разрешения у нас есть отдельная статья: нейросеть для улучшения качества фото. Здесь только лицо.

Улучшить качество лица на фото: как работает восстановление

Модель восстановления лица, по-английски face restore, делает одну вещь: берёт мутное лицо и возвращает ему резкость. Сама схема простая. Нейросеть находит лицо в кадре, вырезает его, прогоняет через модель, которая училась на миллионах пар «размытое и чёткое», и вклеивает результат обратно.

Самые известные открытые модели такого рода это GFPGAN и CodeFormer. Код у обеих открыт, и авторы CodeFormer сами упоминают больше двадцати сторонних сайтов, которые запускают их модель. Официальные демо у неё тоже есть, на Hugging Face и Replicate. Коммерческие приложения вроде Remini используют свои модели, но принцип тот же.

Главное, что нужно понимать: деталей, которых нет в снимке, модель не видит. Если на фото глаз занимает шесть точек, никакая нейросеть не узнает, какого цвета у тебя радужка и где мелкая складка у века. Она нарисует глаз, похожий на средний мужской глаз подходящего возраста. Резкий и красивый, но не обязательно твой.

Есть ещё одна особенность, о которой вспоминают поздно. Модель улучшает только лицо, а остальной кадр остаётся прежним. На выходе резкая голова с чёткими ресницами сидит на мутных плечах, волосы по краям размыты, фон в квадратиках сжатия. Глаз это замечает сразу, даже если не может объяснить, что не так. Если весь снимок слабый, одно лицо его не спасёт, и тогда полезнее апскейлер для всего кадра или новый снимок.

Почему модели подменяют черты

Подмена черт это цена за резкость, так эти модели устроены. У CodeFormer, например, авторы вынесли это в отдельный параметр: вес сходства от 0 до 1. Ближе к нулю результат красивее и детальнее, ближе к единице вернее исходнику. Полностью убрать выбор между «чётко» и «похоже» нельзя, можно только сдвинуть его в одну сторону.

На практике это выглядит так. Допустим, ты прогнал через сервис фото десятилетней давности с выпускного. Лицо стало резким, но брови ровнее, чем были, родинка под глазом исчезла, а нос чуть уже. Мама посмотрит и скажет: «Красиво, но это не совсем ты». И она будет права.

Чаще всего меняются:

• разрез и посадка глаз;
• форма губ и линия улыбки;
• родинки, шрамы, пятна;
• щетина, которая превращается в гладкую кожу или в нарисованную тень;
• морщины у глаз и на лбу, особенно у мужчин за сорок.

Для старого семейного снимка в рамку это можно пережить. Для анкеты знакомств нет: там тебя сравнят с живым человеком на первом свидании.

Улучшить лицо на фото с ИИ и не потерять себя

Если всё-таки идёшь в нейросеть, есть способы снизить подмену.

1. Бери самый чёткий исходник из тех, что есть. Разница между плохим и очень плохим фото на выходе огромная.
2. Если сервис даёт ползунок силы или сходства, начни с середины и сдвигай в сторону сходства.
3. Не прогоняй результат второй раз. Каждый проход добавляет выдумки поверх выдумки.
4. Сравни результат с другим своим фото, где лицо видно хорошо. Смотри на глаза, губы и приметы, а не на «общее впечатление».
5. Уменьши оба снимка до размера аватарки. Если в маленьком размере исходник выглядит как ты, а результат как твой двоюродный брат, выбирай исходник.

И одно правило, которое касается всех сервисов: загружай только свои фото или снимки тех, кто согласен. Лицо друга в онлайн-сервисе это его данные, а не твои.

Улучшить кожу лица на фото без эффекта маски

Кожу чинят ретушью, а не восстановлением. Здесь риск другой, и имя ему пластик. Кнопка «сгладить кожу» в любом приложении размывает всё лицо одинаково, и вместе с прыщом уходят поры, щетина и мелкие морщинки. Издалека чисто, вблизи восковая фигура.

Мужскому лицу это вредит сильнее, чем женскому. Фактура кожи, щетина и складки у глаз читаются как возраст и характер, без них лицо выглядит моложе, но и пустее. Скажем, тебе 35, ты сгладил кожу на аватарке до состояния рекламы крема, а коллеги в рабочем чате видят тебя каждый день. Эффект заметят все, просто вслух не скажут.

Что убирать безопасно: прыщ, порез после бритья, покраснение на носу, жирный блеск на лбу, случайную крошку в бороде. Что оставлять: поры, щетину, морщины, шрамы, родинки. Подробнее по пунктам разобрано в статье про ретушь мужского портрета, а про приложение, где это делают вручную, в тексте про Facetune.

Улучшить цвет лица на фото

Это самая простая из всех задач, и нейросеть для неё не нужна. Лицо почти всегда портит свет: жёлтая лампа на кухне, зелёные офисные лампы, синий свет экрана. Кожа тут ни при чём.

Чинится в любом редакторе галереи за минуту:

1. Найди настройку тепла или баланса белого и сдвигай, пока белая рубашка или стена не станет белой, а не жёлтой.
2. Если лицо красное, слегка убери насыщенность, а лучше только красного, если редактор это позволяет.
3. Сероватое лицо чаще всего значит недодержку: подними экспозицию или тени, а не насыщенность.
4. Сравни с фото при дневном свете, где цвет тебе нравится.

Вот пример. Ты сфотографировался вечером на кухне под тёплой лампой, и лицо вышло цвета апельсинового сока. Сдвинь тепло в холодную сторону, пока кафель за спиной не станет таким, каким ты его помнишь, и кожа вернётся к нормальному цвету сама. Ни одна нейросеть тут не нужна, и лицо остаётся твоим до последней поры.

Главная ошибка тут в загаре. Добавить «здоровый цвет» насыщенностью легко, остановиться трудно, и через пару движений ползунка лицо становится оранжевым, как после неудачного автозагара.

Когда лучше переснять, чем улучшать

Честный ответ: чаще, чем хочется. Если лицо на фото меньше спичечной головки, если снимок сделан ночью на старый телефон или вырезан из группового кадра с другого конца стола, любой сервис будет рисовать тебя заново.

Переснять себя проще, чем кажется. Встань лицом к окну днём, держи телефон на уровне глаз, сделай десяток кадров с небольшими поворотами головы. Этого хватит, чтобы получить резкое лицо без всяких моделей восстановления.

Причём даже самый обычный телефон сейчас снимает лицо достаточно чётко, если дать ему свет. Мутность на старых фото чаще всего берётся из трёх мест: темнота, движение и цифровой зум. Убери все три, и восстанавливать будет нечего. Допустим, тебе нужно фото на аватарку к понедельнику: выйти в субботу днём на балкон с телефоном займёт десять минут, а подбор сервиса, который не превратит старое размытое селфи в чужое лицо, займёт вечер и всё равно закончится компромиссом.

Если нужны готовые портреты в разных сценах, a-dam.photo делает новые фотореалистичные кадры одного мужчины по его селфи, чужие и старые снимки мы не улучшаем. Загружаешь три фото, выбираешь сцены в каталоге, их больше 600, пакеты от 490 ₽. Кадры каталога приходят сразу в 2K, дополнительной обработки для них нет. Апскейл есть только в Профи: там 12 кадров твоей личной модели можно укрупнить вдвое апскейлером, который добавляет резкость и не перерисовывает лицо. Фото хранятся в Yandex Object Storage и передаются AI-сервисам только под твой заказ.

Частые вопросы