Удаление всех вещей: использование современного программного обеспечения для удаления надоедливых объектов: обзор цифровой фотографии


Это звучит знакомо? Уделив тщательное внимание композиции и захвату сцены, вы открываете изображение позже, и ваш взгляд сразу же притягивается к… брошенной обертке на земле или туристу, прогуливающемуся по сцене. Или ненормативную лексику сенсорной пыли, которая появляется в каждом. Одинокий. Фото.

В прошлые дни вы брали инструмент «Штамп» и утомляли пальцем, щелкая мышью, отбирая близлежащие пиксели, чтобы скрыть оскорбительный объект. Теперь у нас есть множество способов избавиться от отвлекающих факторов: инструменты для лечения, заливка с учетом содержимого и приложения, которые делают все это за нас. Вы, несомненно, видели примеры, когда быстрое смахивание по экрану аккуратно стирает фото-бомбардировщики или исполняющие обязанности.

Но действительно ли эти подходы работают? Это зависит от того, что вы хотите удалить, поэтому давайте начнем с малого и продолжим все более раздражающие вторжения, глядя на то, какие инструменты работают в этих ситуациях.

Лечебные кисти

Наиболее распространенными проблемами, которые обычно легче всего устранить, являются пятна или ореолы, вызванные пылью на сенсоре или объективе камеры. Они часто появляются при ясном небе и могут быть даже незаметны, пока вы не просмотрите несколько изображений и не увидите одно и то же затемненное пятно на каждом из них. Почти в каждом графическом редакторе есть вариации восстанавливающей кисти или инструмента точечного восстановления. Вы щелкаете или рисуете по пятну, и программа копирует близлежащие пиксели, чтобы заменить его, растушевывая область, чтобы она смешивалась с окружающими пикселями. Вот как это работает в Lightroom Classic:

Lightroom Classic включает функцию «Визуализация пятен», которая помогает вам идентифицировать области, такие как пятно в верхнем левом углу, с помощью высококонтрастного представления изображения.
В Lightroom Classic размытая птица в небе отвлекает.
Инструмент «Исцеление» удаляет птицу, копируя пиксели из близлежащей области.

Этот базовый инструмент «Исцеление» хорошо работает, когда пятно не слишком велико, а окружающая область достаточно однородна. В более сложных ситуациях, когда происходит копирование и вставка пикселей из других частей изображения, всегда существует опасность того, что идентифицируемые признаки будут продублированы таким образом, что исправление станет очевидным. Большие области или объекты на фоне заметных узоров не так успешны при использовании этой техники.

Заливка с учетом содержимого

Когда Adobe предварительно представила Content-Aware Fill в Photoshop CS5, это было волшебство. Один щелчок или смахивание по области удаляют объект-нарушитель и заполняют пробел более умным способом, чем другие инструменты клонирования или лечения.

Теперь аналогичная технология используется в большинстве программ для редактирования. Техника аналогична: вы щелкаете или перетаскиваете элемент, который хотите удалить, и инструмент разумно определяет, как заполнить область. В этом случае это не прямое удаление участков пикселей из соседних областей, а вместо этого построение замены на основе цветов и тонов в этом разделе и в других частях изображения.

Lightroom Classic 12.3 представил новый режим Content-Aware Remove для своих инструментов «Восстановление», который часто лучше справляется с исправлением области, чем инструмент «Восстановление». В ON1 Photo RAW этот инструмент называется Perfect Eraser. Photoshop включает параметр Content-Aware на панели инструментов для своих инструментов восстановления. Luminar Neo предлагает инструмент «Стереть». CaptureOne называет его Magic Eraser. Вы также найдете те же возможности в автономных приложениях, таких как TouchRetouch. Вы поняли идею.

Проблема в том, что инструмент по-прежнему выбирает пиксели из изображения, чтобы придумать его фон, потому что у него нет другой ссылки. Итак, опять же, большие области, которые нужно стереть, труднее, и он может спотыкаться, когда в заполненной области есть узоры.

Удаление людей перед этой старой лестницей — сложная задача для инструмента Content-Aware Remove в Lightroom Classic.
Сразу видно, что Content-Aware Remove даже не выровнял шаги, оставив на изображении явный дефект.
Технология Content-Aware в Photoshop справилась со своей задачей лучше, но по-прежнему включает в себя такие артефакты, как большой участок земли посреди лестницы.

Ремонт с помощью ИИ

А теперь приходит ИИ, чтобы сделать магию Content-Aware Fill похожей на старый салонный трюк. Инструменты, основанные на технологиях машинного обучения (ML), могут стирать большие области и заполнять пробелы не только на основе окружающего изображения, но и на основе того, что они знают о тысячах похожих сцен. Они также предназначены для идентификации объектов, которые необходимо удалить, что ускоряет процесс исправления.

Например, функция Magic Eraser на телефонах Google Pixel 6 и Pixel 7 в основном соответствует своему названию. Когда вы активируете инструмент в приложении Google Фото, он сканирует изображение на наличие объектов, которые вы, вероятно, хотите стереть, например людей на заднем плане, и выделяет их. Вы также можете перетаскивать элементы вручную, но я считаю, что это хорошо помогает определить возможности. (Google недавно сделал эту функцию доступной для подписчиков Google One в приложении Google Фото на других устройствах.)

Приложение «Фотографии» на Google Pixel 6 определило туристов как вероятных объектов для стирания на этом изображении.
Нажатие «Стереть все» удалило их, в основном.

Возвращаясь к Photoshop, Adobe недавно выпустила общедоступную бета-версию, которая включает в себя новый инструмент «Удалить», который продвигает стирание на шаг дальше, чем инструменты восстановления. Да, он сэмплирует пиксели из остальной части изображения, но он также разумнее заменяет отсутствующую область. Опираясь на технологию Adobe Sensei (облачный ИИ), он обнаруживает узоры и линии в фоновых объектах и ​​чаще правильно их визуализирует (как обычно, с оговоркой, что это зависит от того, что это за фон).

Инструмент «Удалить» в общедоступной бета-версии Photoshop 24.5 сохранил лестницу нетронутой при удалении людей.

Сходным образом, Инпиксио может угадать, какие предметы вы хотите удалить, и стереть их одним щелчком мыши или несколькими движениями.

Удаление ИИ Inpixio обнаружило субъекты…
… и удалил их довольно аккуратно.

Эти «несколько ударов» являются ключевыми во всем этом. Хотя инструменты с искусственным интеллектом в целом хорошо справляются со своей задачей, вы все равно будете убирать области.

Генеративный искусственный интеллект

Основным ограничением вышеупомянутых инструментов является ограниченный запас доступных пикселей. Когда мы смотрим на сцену, мы знаем, что стоит за человеком или объектом, но программа этого не знает. У вас могут быть другие фотографии, на которых эта область четкая, и есть методы компоновки или смешивания изображений, чтобы добиться цели.

Что, если бы программное обеспечение могло изобретать совершенно новые пиксели, а не извлекать их из других областей? Это обещание включения технологий генеративного ИИ в процесс редактирования. На недавней конференции Google I/O компания представила расширенную AI функцию Magic Eraser, которая восстанавливает области после перемещения элементов в сцене. Никакой даты выпуска не было объявлено, кроме как «позже в этом году», но вы можете поспорить, что мы увидим такие объявления от других компаний в течение года.

Для текущего примера, ДАЛЛ-Э 2 имеет функцию «закрашивания», которая заменяет области загруженного вами изображения. Это несколько запутанный процесс: в графическом редакторе вы маскируете объект или человека, которого хотите удалить, сохраняете копию с разрешением 1024 на 1024 пикселя, загружаете ее в DALL-E 2 и описываете полное изображение так, как хотите. появляться. Затем вы создаете варианты, загружаете лучший и смешиваете его с оригиналом в Photoshop или другом редакторе на основе слоев (вероятно, масштабируя сгенерированную версию с низким разрешением и компонуя ее с оригиналом с более высоким разрешением). (Чтобы увидеть этот процесс в действии, посмотрите это PIXнесовершенное видео.)

На этом изображении два человека занимают большую часть кадра, и мы хотим удалить человека слева.
Мы начинаем с того, что маскируем его и загружаем эту версию в DALL-E 2, где мы просим его сгенерировать убедительную область замены.
Мы описываем сцену в тексте, и DALL-E заполняет область.

Без сомнения, эта возможность появится для большинства, если не для всех, вышеупомянутых приложений для редактирования фотографий, поскольку компании внедрят эту технологию в ближайшие месяцы.

Команда очистки

Несмотря на быстрый темп технического прогресса в удалении все более крупных или сложных объектов с фотографий, мы все еще часто ретушируем результаты вручную. Так что не удивляйтесь, когда вам снова понадобится инструмент Clone Stamp, чтобы очистить то, что осталось, и продать иллюзию.



Source link