Глубокое погружение в технологию обработки фотографий Qualcomm Snapdragon 888

Глубокое погружение в технологию обработки фотографий Qualcomm Snapdragon 888

Камеры смартфонов за последние несколько лет стали намного лучше. Отчасти это связано с тем, что сенсоры и линзы камер становятся больше и лучше. Но это также во многом связано с тем, о чем люди не часто думают: улучшениями в обработке изображений, обеспечиваемыми набором микросхем вашего телефона. В следующем поколении высокопроизводительных телефонов Android обработка изображений будет в значительной степени обеспечиваться новым процессором Qualcomm Snapdragon 888.

Есть множество вещей, которые делают Qualcomm Snapdragon 888 лучшим набором микросхем для фотографии, и это в значительной степени сводится к процессору сигналов изображения Spectra 580 или ISP, хотя есть и другие вещи, которые играют здесь. Вот краткое изложение новой технологии обработки изображений, используемой Snapdragon 888, и того, как она может повлиять на то, как вы будете снимать фотографии и видео в 2021 году.

Используйте сразу три камеры

Возможно, самой большой особенностью, предлагаемой Snapdragon 888, является тот факт, что Spectra 580 имеет тройных ISP. Что это значит? По сути, это означает, что вы можете использовать на своем телефоне до трех камер одновременно.

На самом деле это немного полезнее, чем кажется. В прошлые годы в камерах смартфонов регулярно использовались две камеры одновременно, и вы даже не задумывались об этом. Хорошим примером этого является использование датчика глубины, который собирает данные, необходимые смартфону для точной обработки таких вещей, как боке или размытие фона, для эффектов портретного режима.

Благодаря одновременному использованию трех камер вы можете захватывать три или четыре видеопотока 4K HDR одновременно, что может пригодиться видеооператорам, которые могут захотеть вернуться позже и переключиться между разными видеопотоками. Или вы можете сделать три 28-мегапиксельных фотографии и сразу просмотреть их в видоискателе, что поможет вам всегда делать самые лучшие снимки.

Энди Боксалл / Цифровые тенденции

«Вы можете снимать двумя камерами, обращенными к миру, и одну снимать лицом к пользователю, поэтому, если вы собирались снимать какой-то документальный фильм, который вы снимали двумя камерами, например, зумом, а затем вы хотели бы также снимать свое лицо, как вы рассказывая об этом, вы также можете сделать это », – сказал Джадд Хип, старший директор по управлению продуктами Qualcomm, в интервью Digital Trends.

Искусственный интеллект тоже может сыграть свою роль. Механизм искусственного интеллекта, встроенный в Snapdragon 888, можно использовать в сочетании с параллельной работой трех камер, чтобы гарантировать, что ваш объект всегда будет правильно оформлен. Qualcomm демонстрирует демонстрацию, созданную ArcSoft, которая автоматически увеличивает масштаб объекта, когда она уходит от камеры, лучше кадрируя снимок и улучшая качество видео.

Другое главное преимущество тройных интернет-провайдеров заключается в том, что они могут обрабатывать три потока данных одновременно. Это немного технически, но способ, которым многие камеры смартфонов делают отличные фотографии в наши дни, заключается в том, что они снимают кучу разных фотографий с разной экспозицией, а затем как бы объединяют их вместе, чтобы создать яркую и детализированную фотографию с высоким динамическим диапазоном. С Snapdragon 888 такие же технологии можно применить к видео, что должно сделать HDR-видео более детализированными.

Кстати об искусственном интеллекте…

AI будет играть другие роли в обработке изображений на Snapdragon 888, особенно когда речь идет об автоматической экспозиции, автофокусе и автоматическом балансе белого, также известном как 3A. Раньше ИИ не обязательно играл большую роль в этих областях, но он играет на Snapdragon 888 – и Qualcomm заявляет, что он может оказать значительное влияние на мобильную фотографию.

«Мы фактически обучили нейронную сеть на основе системы человеческого зрения», – сказал Хип. «Мы взяли группу людей и надели им на головы гарнитуры виртуальной реальности, показали им кучу фотографий и видео и отслеживали движение их глаз. Итак, вы видите, что пользователь не обязательно смотрит на части сцены, которые, по мнению камеры, являются основными точками фокусировки и экспозиции. Вдалеке могут быть люди или интересные объекты за другими объектами ».

Конечно, еще предстоит увидеть, как именно это будет работать в реальной фотографии и видео. Некоторые пользователи могут обнаружить, что это очень удобная система, в то время как другие, вероятно, захотят сохранить ручное управление фокусировкой камеры. Надеюсь, это поможет сделать фокусировку и экспозицию более интуитивно понятными – в конце концов, большинство людей просто хотят, чтобы камеры их смартфонов «просто работали». В конечном итоге производители телефонов смогут решить, какие функции – или части функций – они хотят реализовать, когда дело доходит до разработки приложений для камеры.

Магия серийного режима

В прошлом году Qualcomm приветствовала процессор Snapdragon 865, который предлагает скорость обработки 2 гигапикселя в секунду, однако в этом году компания увеличивает скорость до 2,7 гигапикселя в секунду. По сути, в результате Spectra 580 ISP может обрабатывать на 35% быстрее, чем Spectra 480 из прошлого года.

Что это значит для вас? Проще говоря, технология сможет снимать до 120 фотографий с разрешением 12 МП каждую секунду, выводя съемку в режиме серийной съемки на новый уровень на смартфонах.

«Вы можете нажать кнопку на камере один раз, и она сделает серию снимков, сделав 120 изображений всего за одну секунду. Итак, 120 кадров в секунду при 12 мегапикселях », – сказал Хип.

Это очень впечатляет – и хотя производителям потребуется внедрить забавное программное обеспечение, чтобы гарантировать, что у вас не будет свалки из 120 фотографий в вашей фотопленке каждый раз, когда вы нажимаете кнопку захвата, факт возможный должно гарантировать, что вы сможете снимать даже очень быстро движущиеся объекты.

Когда вы действительно увидите эти функции?

Все эти новые функции великолепны, но они мало что значат, если производители смартфонов фактически не применяют их или не включают в программное обеспечение. Конечно, время действительно зависит от каждого производителя, но первым шагом, конечно же, является включение таких функций на аппаратном уровне.

«Мы сотрудничаем с [manufacturers] очень рано, и мы заранее учитываем их отзывы », – сказал Хип. «Мы начали разработку этого чипа, когда я присоединился к Qualcomm в 2017 году, поэтому нам нужно планировать довольно далеко вперед. Мы должны посмотреть на рынок и спросить: «Мы думаем, что нам нужен тройной провайдер?» Камера – это область, в которой [manufacturers] любят выделяться. Они выбирают другой набор функций камеры, объективов, датчиков и т. Д. Хорошая новость в том, что мы можем включить все это ».

Рекомендации редакции





Комментарии

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *