Инпейнтинг (Inpainting)

Инпейнтинг — это техника редактирования изображений с помощью ИИ, которая восстанавливает или заменяет замаскированную (выделенную) область изображения, не затрагивая остальную часть, при этом модель генерирует новый контент, бесшовно сливающийся с окружающими пикселями по освещению, текстуре и перспективе. Диффузионные модели инпейнтинга специально обучаются на задаче восстановления по маске: во время обучения случайные области изображений закрашиваются чёрным, и модель учится предсказывать правдоподобный контент для отсутствующей области, опираясь на видимое окружение (а в управляемом инпейнтинге — ещё и на текстовый промпт, описывающий, что должно там появиться). «Аутпейнтинг» — это обратная операция/расширение: генерация нового контента за границами исходного изображения для расширения холста, что полезно для превращения квадратного фото товара в широкий баннер без обрезки объекта. Почему это важно для SaaS-разработчиков: инпейнтинг — это движок, лежащий в основе функций редактирования фото «удалить объект» (удаление случайного прохожего, линии электропередач, водяного знака), инструментов для очистки фото товаров (удаление отвлекающего элемента фона) и творческих приложений, позволяющих пользователю выделить область и написать, что должно быть на её месте вместо этого («замени небо на закат»). Также применяется при очистке датасетов и в продуктах реставрации архивных фотографий для восстановления повреждённых или перекрытых участков. Конкретный пример — SaaS для редактирования портретов с функцией «убрать фон»: (1) пользователь загружает портретное фото, снятое в захламлённом домашнем офисе; (2) приложение запускает модель автосегментации, чтобы обнаружить объект съёмки, и создаёт инверсную маску, покрывающую всё, кроме человека, затем применяет несколько пикселей растушёвки края, чтобы граница маски не была жёсткой зазубренной линией; (3) вызывает API инпейнтинга: `POST /v1/inpaint` с изображением, маской и промптом «чистый, мягко размытый нейтральный серый студийный фон, профессиональное освещение для портрета»; (4) модель заполняет замаскированную область правдоподобным, бесшовно вписанным студийным фоном, соответствующим направлению света и цветовой температуре оригинального фото, так что объект не выглядит вставленным на несовпадающий фон; (5) результат возвращается за несколько секунд, и приложение предлагает 2-3 готовых стиля фона (сплошной серый, мягкое офисное размытие, боке на улице), сгенерированных из того же исходного фото. Качество маски — главный фактор, определяющий качество результата: небрежные края маски с жёсткими границами приводят к заметным швам или ореолам вокруг объекта, поэтому в промышленных инструментах отдельно вкладываются в этап сегментации и растушёвки, а не относятся к нему как к формальности перед самим вызовом инпейнтинга.