ОБЗОРЫ
Что такое Deep Fusion: как использовать эту фишку «Камеры» iPhone
06 июля 2020
Deep Fusion — новая умная технология для получения максимально детальных снимков, которая работает на базе нейронных сетей и искусственного интеллекта. Она работает в iOS 13.2 и более новых версиях операционной системы и только на iPhone 11, 11 Pro, 11 Pro Max и выше. Расскажем о ней подробнее.
Чем интересна Deep Fusion — новая технология «Камеры»
Вместе с выходом iOS 13.2 новые смартфоны Apple – iPhone 11, iPhone 11 Pro и iPhone 11 Pro Max — получают доступ к технологии обработки изображения под названием Deep Fusion. Она работает на базе 8-ядерной системы Neural Engine последнего поколения, которая сегодня доступна только на процессоре Apple A13 Bionic. Deep Fusion использует передовые технологии машинного обучения и искусственного интеллекта, чтобы обработать каждый пиксель вашей фотографии. С помощью них данная технология оптимизирует текстуру, детализацию и уровень шума на снимке, чтобы сделать его более качественным.
Благодаря технологии Deep Fusion на каждой фотографии самые мелкие детали можно запечатлеть в достаточно сложных условиях внешнего освещения. По аналогии со Smart HDR в этом случае «Камера» делает целый набор снимков с разным уровнем экспозиции. Интеллектуальные механизмы объединяют их в две референтных фотографии с общим количеством точек — 24 миллиона. После этого «Камера» оставляет половину из них — получается стандартная картинка на 12 Мп с проработкой даже самых мелких деталей. При этом включать какие-то дополнительные функции или совершать любые другие действия не нужно.
Как Deep Fusion работает в «Камере» iPhone 11 и iPhone 11 Pro
Во-первых, вам нужно открыть стандартное приложение «Камера» на своём iPhone 11, iPhone 11 Pro или iPhone 11 Pro Max и сделать снимок с помощью стандартной широкоугольной камеры или телевика. Если условия освещения окажутся подходящими, программа автоматически активирует Deep Fusion.
Во-вторых, если «Камера» определяет, что Deep Fusion можно использовать, она делает одновременно восемь снимков с разными значениями экспозиции. Приложение отправляет их в буфер обмена для дальнейшей обработки. За счёт производительного процессора Apple A13 это происходит моментально.
В-третьих, из восьми снимков с разными значениями экспозиции технология Deep Fusion сначала создаёт два специальных снимка, которые называют «референтными». Общее количество пикселей у каждого снимка — 12 миллионов. Именно отсюда 24 миллиона, которые используются в обработке.
В-четвёртых, после этого пара получившихся снимков с помощью системы Neural Engine, нейронных сетей и искусственного интеллекта объединяются в один. Deep Fusion анализирует каждую отдельную точку, чтобы получить максимально качественное и детальное изображение.
В-пятых, после всех этих манипуляций вы получаете один готовый снимок на 12 Мп. Стоит ещё раз отметить, что все они осуществляются без каких-либо манипуляций со стороны пользователя — даже какой-то конкретный режим включать не придётся. Но разница заметна невооружённым глазом:
