План будущего фотографии – компьютерная фотография
Мы вступаем во вторую неделю фотоконкурса #ShotOnSnapdragon, и вместе с ним мы еще раз внимательно рассмотрим, как такие платформы, как мобильная платформа Qualcomm (R) Snapdragon (™) 855, улучшают возможности фотографирования вашего смартфона. Если вы еще этого не сделали, обязательно ознакомьтесь с нашими советами, которые также помогут улучшить свои навыки фотографии.
Основываясь на обзоре процессоров обработки изображений (ISP) на прошлой неделе, сегодня мы исследуем, как технология ISP Qualcomm Spectra (™) в сочетании с возможностями вычислительной фотографии выводит изображения с вашего смартфона на совершенно новый уровень. Под вычислительной фотографией мы подразумеваем передовые методы обработки изображений, которые улучшают и расширяют обычные возможности цифровой фотографии. Некоторые из них позволяют фотографам вручную настраивать свои изображения, в то время как другие тонко работают в фоновом режиме, гарантируя, что ваши фотографии всегда будут выглядеть наилучшим образом. Давайте погрузимся.
Мобильные платформы, созданные для обработки данных изображений
В то время как интернет-провайдер идеально подходит для выполнения обычных задач фотосъемки и видеозахвата, более продвинутые алгоритмы вычислительной фотографии требуют более мощного оборудования. Примеры использования включают программное размытие боке для профессионального уровня глубины резкости, обработку цвета с расширенным динамическим диапазоном, многокамерную съемку, электронную стабилизацию изображения (EIS) и превосходные возможности цифрового масштабирования.
Мобильные платформы Snapdragon состоят из множества различных частей обработки, каждая из которых имеет свои особенности и возможности, многие из которых подходят для расширенной обработки изображений. В дополнение к универсальному процессору и захвату изображений Qualcomm Spectra ISP, мобильные платформы Snapdragon содержат цифровой сигнальный процессор (DSP) Qualcomm (R) Hexagon (™) и графический процессор (GPU) Qualcomm (R) Adreno (™). оба хорошо подходят для обработки сложных алгоритмов визуализации. Использование этих компонентов на платформе известно в мобильной индустрии как гетерогенная обработка.
Объединение возможностей нескольких компонентов обработки SoC повышает производительность и энергоэффективность вычислительной фотографии на мобильной платформе Snapdragon
Каждый из этих процессоров полезен для разных типов алгоритмов. Например, центральные процессоры предлагают лучшую производительность там, где алгоритм не очень параллелен и требует
операции ветвления. Между тем высокопараллельные алгоритмы, которые часто возникают в методах постобработки изображений, таких как HDR и съемный объект, работают на графическом процессоре намного быстрее. Наконец, DSP – идеальный процессор для сенсорных приложений в реальном времени и задач машинного обучения, таких как обнаружение объектов.
Например, смартфоны на базе Snapdragon предлагают электронную стабилизацию изображения (EIS) без каких-либо дополнительных механических деталей. Отслеживая движение с помощью аппаратного акселерометра телефона и выполняя алгоритмы отслеживания на графическом процессоре Adreno, Spectra ISP может получить очень стабильное изображение в нужное время. Благодаря этому ваши фотографии не будут размытыми, даже если у вас нет устойчивых рук.
Последняя версия Qualcomm Spectra 380 ISP внутри Snapdragon 855 и Qualcomm Spectra 350 внутри Snapdragon 730 включает выделенные компоненты обработки компьютерного зрения (CV-ISP) для еще более эффективного ускорения. Это позволяет самому CV-ISP запускать обнаружение объектов, замену фона и размытие боке 4K HDR в реальном времени, освобождая ресурсы процессора, графического процессора и DSP для запуска других процессов.
Делаем фотографию умнее
Программная глубина резкости боке
Портретные режимы и программное боке стали неотъемлемой частью камер смартфонов. Предлагая размытие, подобное зеркалке, различные световые эффекты и даже эффекты замены фона, чтобы кардинально изменить внешний вид ваших изображений.
Чтобы создать программный эффект размытия, камере требуется информация о глубине сцены, в которой вы снимаете. Один из способов сделать это – включить специальную камеру глубины, например датчик времени полета, для определения фактического расстояния. В качестве альтернативы телефон с двумя камерами может делать снимки одновременно с двумя разными фокусными расстояниями. Мобильные платформы Snapdragon поддерживают несколько камер, если производители смартфонов захотят реализовать эту технологию. Альтернативный метод, используемый множеством одиночных камер, – это очень быстрая последовательная съемка в нескольких точках фокусировки.
Когда в телефоне есть данные с несколькими фокусными расстояниями, применяются стереоалгоритмы, которые работают аналогично нашим глазам, чтобы различать, какие объекты находятся на переднем плане, а какие – на заднем. Затем к изображению применяется второй алгоритм размытия, чтобы смягчить объекты, которые не в фокусе. Преимущество использования этого метода заключается в том, что фокусный объект, степень размытия и другие эффекты можно изменить после того, как фотография была сделана. Эти данные также могут быть сохранены в формате изображения HEIF.
Программное боке выключено Программное боке включено
Благодаря CV-ISP в последних мобильных платформах Snapdragon мобильные телефоны могут применять размытие боке не только к фотографиям, но и к живому видео. CV-ISP обеспечивает размытие боке с разрешением до 4K в видео в реальном времени, а также поддерживает высокий динамический диапазон и 10-битное качество.
Превосходное масштабирование
Увеличение объекта в очень полезной технике фотографии для создания идеального изображения. Тем не менее, некоторые телефонные камеры исторически застряли с цифровым зумом, что значительно снижает качество, когда вы начинаете увеличивать масштаб довольно далеко. В этом отношении помогают оптический зум или телеобъектив, но дополнительные камеры и объективы могут быть дорогими. С помощью одной камеры можно делать очень хорошие увеличенные снимки благодаря некоторым умным алгоритмам и аппаратному обеспечению для их эффективной работы.
Функция камеры Qualcomm (R) OptiZoom (™) разработана для захвата 12 изображений в быстрой серии. Алгоритмы объединяют данные из этих 12 снимков вместе, наблюдая различия и сходства между пикселями. Эти субпиксельные различия между снимками используются для сбора дополнительных деталей, создавая изображение с более высоким разрешением, наполненное дополнительными деталями. Это также известно как зум сверхвысокого разрешения, и он дает намного лучшие результаты по сравнению с цифровым кадрированием вашего изображения после нажатия кнопки спуска затвора.
Пример 2,6-кратного цифрового увеличения Пример увеличения 2,6x сверхвысокого разрешения
Расширенный динамический диапазон (HDR)
Обработка HDR требуется в сценах с большим разбросом между светлым и темным, чтобы избежать переэкспонирования или недодержки. Примеры включают попытку сфотографировать объект на ярко освещенном фоне, например, облачное небо, или съемку при слабом освещении с одним источником света.
Смартфоны на базе Snapdragon создают изображения с высоким динамическим диапазоном, комбинируя несколько изображений вместе, каждое с разной настройкой экспозиции. На более темных снимках правильно отображаются светлые участки, такие как солнце и облака, а на более ярких снимках – светлые участки в темноте. Алгоритмы объединяют детали из всех этих изображений вместе, чтобы создать изображение, которое предлагает лучшие световые эффекты и тени, чем стандартное изображение. Технология HDR от Qualcomm Technologies без привидений также помогает избежать размытых краев, обнаруживая и удаляя любое движение в кадре.
HDR выключен HDR включен
Помогаем вам делать лучшие фотографии
Современные смартфоны ушли в прошлое, просто предлагая отличное аппаратное обеспечение камеры, теперь они также предлагают передовые технологии обработки и уловки, чтобы сократить еще меньший разрыв с профессиональными цифровыми зеркальными фотокамерами. Мобильные платформы Snapdragon лежат в основе многих устройств, предлагающих потребителям все самое лучшее в мобильной фотографии.
Конечно, расширенная обработка – это только часть картины. Если вы хотите делать отличные снимки, обязательно ознакомьтесь с нашими советами экспертов о том, как сделать идеальный снимок. И не забудьте отправить свои работы на фотоконкурс #ShotOnSnapdragon, чтобы получить шанс выиграть смартфон на Snapdragon 855.
Контент, спонсируемый Qualcomm Technologies, Inc.
Qualcomm Snapdragon, Qualcomm Spectra, Qualcomm Adreno, Qualcomm Kryo, Qualcomm OptiZoom и Qualcomm Hexagon являются продуктами Qualcomm Technologies, Inc. и / или ее дочерних компаний.
Источник записи: https://www.androidauthority.com