Max Home IndustryДавно прошли те времена, когда можно было сказать, что фотография никогда не лжет. Последние работы Google и MIT позволяют создавать идеальные фотографии вещей, снятых через стеклянные окна и цепные ограждения. Это еще один шаг на пути к чистой вычислительной фотографии, где окончательная фотография-это не то, что вы когда-либо могли видеть на самом деле.
Ранее мы сообщали об автоматическом удалении отражений с фотографий с помощью небольшого смещения слабого двойного изображения, которое возникает при съемке фотографии через стекло при разделении отражения и изображения. Однако этот новый метод гораздо более широко применим.
Когда люди смотрят через окно или через препятствующий забор на сцену, они часто получают представление о том, как выглядят вещи, которые не испорчены затемняющими эффектами. Причина в том, что люди способны вычитать «шум», двигая головой. Различные точки зрения позволяют рассматривать отдаленную сцену во всей ее полноте, и мозг выполняет разумную работу по «рисованию» недостающих частей.
Все это основано на различном движении из-за параллакса, которому подвержены объекты на разных расстояниях. Когда вы двигаете головой, то, что близко, движется больше, чем то, что далеко.
Это принцип, который команды Google и MIT используют, чтобы отделить фоновую сцену от переднего плана, который портит изображение.
Алгоритм в основном вычисляет оптический поток изображений, то есть то, как он движется, из последовательности кадров. Кадры могут быть взяты из видео или просто сделаны в виде набора фотографий, когда камера перемещается, чтобы, скажем, сделать панораму. Принцип может быть простым, но реализация-это тур де сила обработки изображений.
Следующее видео объясняет некоторые детали и показывает множество примеров того, как все это работает:
Удаление забора впечатляет, но так же впечатляют восстановленные изображения того, что было отражено в окне. Очевидно, что этот метод можно использовать не только для улучшения фотографий, но и для восстановления информации, которая ранее была скрыта на фотографиях. Учитывая, что для обработки требуется так мало кадров, она также может быть применена ретроспективно.
Похоже, мы приближаемся к тому дню, когда камера сможет делать фотографии, которые просто не могли быть сделаны с помощью не вычислительного подхода. Когда вы достаете камеру и направляете ее на что-то через забор или окно и просто нажимаете кнопку, чтобы удалить недостатки, результатом будет фотография, которая больше соответствует вашему опыту видения, но это будет ложь по любому определению.