Пространственное рефрейминг: революционное редактирование с перспективой появится в iOS 27
Apple готовится представить то, что многие называют самой преобразующей функцией iOS 27: пространственное переосмысление. Эта революционная возможность, которая в настоящее время проходит тестирование, позволит пользователям iPhone фундаментально изменить перспективу своих фотографий после того, как они были сделаны, что фактически дает второй шанс на композицию без необходимости повторной съемки.
Что такое пространственный рефрейминг?
Пространственное рефрейминг представляет собой значительный скачок в компьютерной фотографии, поскольку он использует передовой искусственный интеллект для реконструкции изображений с новых точек зрения. Эта функция позволяет пользователям просто перетаскивать элементы на фотографии, чтобы изменить точку обзора, а ИИ разумно заполняет любые пробелы или недостающую информацию, возникшую в результате этого преобразования.
В отличие от традиционного кадрирования или цифровых манипуляций, которые просто удаляют контент, пространственное рефрейминг активно перестраивает визуальное поле. Это означает, что фотографы могут корректировать композицию своих снимков после съемки, исправляя проблемы с перспективой или даже создавая совершенно новые композиции на основе существующих изображений.
Техническая реализация
Эта функция глубоко интегрирована в экосистему Apple как часть Apple Intelligence. Согласно документации Apple, Spatial Reframing обрабатывает все вычисления на устройстве, а не полагается на облачные серверы. Такой подход обеспечивает как быстрое время обработки, так и повышенную конфиденциальность, поскольку конфиденциальные изображения никогда не покидают устройство пользователя.
Похоже, что базовая технология основана на существующих разработках Apple в области машинного обучения и компьютерного зрения и, вероятно, включает в себя нейронные сети, обученные на миллионах изображений, чтобы понять, как объекты и окружающая среда должны выглядеть под разными углами.
Пользовательский опыт
Пространственное переформатирование будет доступно через приложение «Фото», расположенное в новом разделе «Инструменты», предназначенном для расширенных возможностей редактирования. Сообщается, что интерфейс интуитивно понятен: пользователи могут просто перетаскивать точки на изображении, чтобы настроить перспективу, с предварительным просмотром того, как ИИ реконструирует сцену в реальном времени.
Первые тестировщики выразили особое восхищение тем, как эта функция обрабатывает сложные текстуры и детали. В отличие от некоторых существующих инструментов редактирования на базе искусственного интеллекта, которые не справляются со сложными узорами или мелкими деталями, Spatial Reframing сохраняет замечательную четкость в таких областях, как черты лица и автомобильные линии.
Первые впечатления
Те, кто протестировал эту функцию, описывают результаты, превосходящие ожидания. Один рецензент, имевший доступ к бета-версии, назвал ее «не похожей ни на что, с чем я сталкивался на любом другом телефоне», подчеркнув естественность и точность реконструкций ИИ.
Эта технология кажется особенно подходящей для:
Реконструкция архитектурных элементов с новой точки зрения.
Сохранение деталей лица при изменении точки обзора портрета.
Поддержание единообразия текстуры на сложных поверхностях, например транспортных средствах.
Создание правдоподобных продолжений природной среды.
Сравнительный анализ
Чтобы понять значение пространственного рефрейминга, полезно сравнить его с существующими технологиями:
| Технологии |
Пространственное переосмысление |
Традиционная обрезка |
Существующее редактирование ИИ |
Изменение перспективы |
Полный сдвиг 3D-перспективы |
Ограничено прямоугольной обрезкой |
Ограничено 2D-манипуляциями |
Реконструкция контента |
ИИ восстанавливает недостающий контент |
Удаляет только контент |
Зависит от реализации |
Обработка сложных деталей |
Отлично работает с текстурами |
Н/Д |
Часто возникают трудности |
Место обработки |
На устройстве |
На устройстве |
Часто в облаке |
Конфиденциальность и производительность
Apple подчеркнула, что Spatial Reframing поддерживает приверженность компании обеспечению конфиденциальности, обрабатывая все данные локально на устройстве. Такой подход устраняет опасения по поводу отправки изображений на внешние серверы для анализа и решает распространенную проблему конфиденциальности, возникающую при использовании инструментов редактирования изображений на базе искусственного интеллекта.
Сообщается, что производительность впечатляет: эта функция обеспечивает практически мгновенные результаты даже на сложных изображениях. Такая скорость объясняется оптимизацией моделей машинного обучения для специального оборудования Apple, включая Neural Engine в чипах серий A и M.
Потенциальные применения
Внедрение пространственного рефрейминга может изменить подход фотографов к композиции и постобработке. Возможные применения включают в себя:
Архитектурная фотография: исправление искажений перспективы или изменение углов обзора после съемки.
Портретная фотография: корректировка соотношения между объектом и фоном без повторной съемки.
Недвижимость: создание более привлекательного вида недвижимости путем корректировки перспектив.
Социальные сети. Быстрая оптимизация изображений для разных платформ путем настройки композиции.
Творческое самовыражение: изучение альтернативных композиций существующих кадров.
Будущие последствия
Пространственное рефрейминг может представлять собой лишь начало новой эры в компьютерной фотографии. Эта технология может открыть путь к еще более сложным манипуляциям после съемки, включая полную реконструкцию 3D-сцены из 2D-изображений или возможность изменять условия освещения после съемки.
Поскольку Apple продолжает инвестировать в машинное обучение на устройствах, мы можем ожидать аналогичных достижений, которые еще больше стирают грань между фотографией и цифровым искусством, сохраняя при этом стандарты конфиденциальности и производительности, которые стали отличительными чертами подхода Apple к искусственному интеллекту.
Хронология выпуска
Ожидается, что пространственное рефрейминг станет частью iOS 27, которую Apple обычно выпускает осенью. В настоящее время эта функция находится на стадии тестирования, и Apple, вероятно, соберет отзывы для доработки реализации перед публичным выпуском. Как и в случае с основными обновлениями iOS, функция Spatial Reframing будет доступна на всех моделях iPhone, поддерживающих новейшую операционную систему, однако производительность может варьироваться в зависимости от возможностей устройства.
Заключение
Пространственное рефрейминг, похоже, переосмыслит возможности мобильной фотографии, предлагая возможности, которые раньше были прерогативой специализированного программного обеспечения или требовали профессионального оборудования. Обеспечивая изменение перспективы после съемки и интеллектуально восстанавливая недостающий контент, Apple устраняет фундаментальное ограничение фотографии, сохраняя при этом свои обязательства по конфиденциальности и производительности.
По мере приближения осеннего выпуска iOS 27 фотографы и обычные пользователи вскоре могут обнаружить, что их самым ценным аксессуаром для камеры является уже не просто объектив, а вычислительная мощность, которая позволяет им видеть свои фотографии совершенно по-новому. Потенциал этой функции по демократизации сложных манипуляций с фотографиями может стать важной вехой в развитии технологий мобильной обработки изображений.
🤩 Возможно, это самая полезная функция в iOS 27.
🆕Пространственный рефрейминг уже тестируется, и результаты впечатляют. Теперь пользователи iPhone могут полностью изменить перспективу постфактум — просто перетащите курсор, и ИИ восстановит недостающее. Ни кадрирования, ни пересъемки.
🤔 Первые тестеры говорят, что даже сложные текстуры (лица, линии автомобилей) получаются на удивление чистыми. Один рецензент назвал его «не похожим ни на что, с чем я сталкивался на любом другом телефоне».
ℹ️ Эта функция работает в приложении «Фото» в новом разделе «Инструменты». Это часть Apple Intelligence и работает на устройстве, и Apple обещает, что это быстро и конфиденциально. iOS 27 выйдет этой осенью.
#функции #iOS @iPhone
🤩 Возможно, это самая полезная функция iOS 27.
🆕Пространственный рефрейминг уже тестируется, и результаты впечатляют. Теперь пользователи iPhone могут полностью изменить перспективу постфактум — просто перетащите курсор, и ИИ восстановит недостающее. Ни кадрирования, ни пересъемки.
🤔 Первые тестеры говорят, что даже сложные текстуры (лица, линии автомобилей) получаются на удивление чистыми. Один рецензент назвал его «не похожим ни на что, с чем я сталкивался на любом другом телефоне».
ℹ️ Эта функция работает в приложении «Фото» в новом разделе «Инструменты». Это часть Apple Intelligence и работает на устройстве, и Apple обещает, что это быстро и конфиденциально. iOS 27 выйдет этой осенью.
#функции #iOS @iPhone
TechOffice
