На прошлой неделе, пользователи iPhone XS заполнили форумы, чтобы жаловаться , на их новые Айфоны, а точнее селфи камеры, в которых якобы были принудительно тайно применен бьюти фильтр, который разглаживает кожу, а в некоторых случаях даже меняет черты лица. А заодно отметили, что если в китайских смартфонах сомнительную «улучшалку» фотографий можно отключить, то в iPhone она работает по умолчанию и у пользователей уже нет возможности получать привычные снимки на фронтальную камеру. До этого много пользователей заметили, что при сопоставлении снимком сдаланых на iPhone X и iPhone XS, второй действительно отображал кожу так, как будто она была искусственно сглажена.
    Но, как и следовало ожидать, в этом не было  заговором между Apple и как выяснилось, сглаживание кожи является побочным эффектом того, как iPhone XS использует множественные экспозиции и штучный интелект для получения более качественных изображений.
Разработчики альтернативного приложения-камеры Halide детально разобрались с тем, какие изменения произошли в новом поколении, iPhone. Они подтверждают, что никакого бьютификатора в камере iPhone XS нет, а разница в снимках появилась из-за появления Smart HDR который делает освещение лучше. Это улучшенный алгоритм склейки фотографий, который удалось реализовать благодаря использованию нового Image Signal Processor и участия сопроцессора Neural Engine в обработке снимков.

IPhone XS объединяет экспозиции и регулирует яркость в ярких областях и уменьшает темноту в тенях. Детали остаются, но мы можем воспринимать картинку, как менее резкую, потому что она утратила  локальный контраст . На фотографии выше кожа выглядит более гладкой, потому  что свет не такой резкий.
...
После тестирования iPhone XS бок о бок с X мы обнаружили, что XS имеет более высокую скорость затвора и более высокий уровень ISO. Другими словами, он фотографигует намного быстрее, но получает больше шума.
Этот шум нужно как-то удалить, и это сказываетсятся на фото: шумоподавление устраняет немного деталей и локальный контраст. Проще говоря, чем хуже условия освещенности, тем более заметным становится «разглаживание» кожи.

    Чтобы доказать, что это не особый фильтр для смягчения кожи, de With продемонстрировал, что тот же эффект применяется к предметам без кожи, например, к лимону.
    Так что теория заговора развенчана, что является хорошей новостью. Но вот плохая новость: если вам не нравится  фотографии сделаные на фронтальную камеру, то возможности изменить настройки под свой вкус нет. Вы можете отключить Smart HDR, что в какой-то степени «исправит» проблему, но ценой этому будет ухудшения большей части ваших фотографий при нормальном освещении.

В режиме Smart HDR камера смартфона захватывает серию изображений: переэкспонированные и недоэкспонированные версии для получения информации о самых светлых и темных областях, затем несколько обычных снимков. Из всех этих изображений отбираются лучшие области для получения итоговой фотографии. В результате работы этого алгоритма происходят две вещи: качественнее подавляются шумы и снижается контраст между светлыми и темными участками кадра. С одной стороны это позволяет избежать пересвеченных пятен на коже или потери деталей в тенях. В то же время человек воспринимает изображение менее резким. Именно из-за этого появились обвинения Apple в добавлении бьютификатора.

Камера iPhone устраняет перепады между светлыми и темными участками для получения более аккуратного изображения. А бютификатор использует обычное размытие для устранения недостатков кожи.

Отличная иллюстрация того как локальный контраст влияет на наше восприятие резкости есть в иллюстрации с Википедии. Все линии на рисунке имеют одинаковые границы, но верхняя часть кажется размытой, а нижняя — более четкой из-за контраста и примыкания светлого контура к темному. Аналогичная ситуация с селфи на iPhone XS — снижение перепадов освещенности участков и более качественное шумоподавление заставляет нас думать о том, что кожа получается более гладкой, чем мы привыкли.



Впрочем, раз уж речь идет о программных алгоритмах, с обновлениями операционной системы Apple может «настраивать» работу режима Smart HDR. Если количество критики не уменьшится и пользователи не смогут привыкнуть к новым селфи на фронтальную камеру, инженеры Apple смогут повысить локальный контраст на фотографиях. Появится больше блестящих или слишком темных участков, зато кожа станет выглядеть более естественно.