В сегодняшних быстро развивающихся технологиях смартфонов многокамерные системы стали стандартом для флагманских моделей. Однако проблема отклонения цвета между линзами всегда мешала пользователю. В этой статье мы рассмотрим основные технологии
Мультирум сотрудничество — калибровка согласованности цвета, анализ технических проблем и отраслевых решений.
Технические проблемы согласованности многокамерной съемки
Современные смартфоны обычно оснащены несколькими камерами, такими как основная камера, сверхширокоугольный объектив и телеобъектив. Каждый объектив имеет разные модели, оптические конструкции и алгоритмы обработки изображений. Когда пользователи меняют объективы, может наблюдаться заметный скачок в цвете и контрастности, что особенно заметно в сложных условиях освещения.
Основные проблемы включают в себя:
1. Различия в реакции сенсоров: разные сенсоры имеют разную чувствительность к основным цветам RGB, что приводит к естественным отклонениям в цветопередаче.
2. Оптические различия в путях прохождения лучей: Различия в покрытии линз и материале линз могут влиять на светопропускание, тем самым изменяя цветопередачу.
3. Совместимость алгоритмов: алгоритмы, оптимизированные независимо для каждой камеры (например, HDR, шумоподавление), могут конфликтовать при совместной работе.
Ключевые технологии калибровки согласованности цвета
Для решения вышеуказанных проблем производители смартфонов и производители чипов (такие как Qualcomm, MediaTek) совместно разработали технологии многомерной калибровки:
1. Аппаратная калибровка цвета
Сопоставление цветовой матрицы: с помощью лабораторного спектрометра собрать данные о цветовой реакции каждой линзы, создать математическую матрицу преобразования и привести цветовое пространство различных датчиков к стандартной цветовой области (например, sRGB/P3).
Синхронизация баланса белого: использование датчика цветовой температуры или алгоритма для синхронизации параметров баланса белого каждого объектива в реальном времени с целью снижения влияния изменений окружающего освещения на цвет.
2.Оптимизация алгоритма программного обеспечения
Выравнивание характерных точек: с помощью технологии регистрации изображений идентифицируйте характерные точки, снятые разными объективами в одной и той же сцене, и установите взаимосвязь на уровне пикселей.
Динамическое усиление: в зависимости от разницы яркости сцены динамически регулируйте параметры ISO и экспозиции каждого объектива, чтобы избежать передержки в светлых участках или шума в темных областях.
3.Расширение возможностей машинного обучения
Модель калибровки на основе данных: используйте большой объем данных реальной съемки, чтобы обучить нейронную сеть изучать отклонения цвета различных объективов в сложных сценах и добиться адаптивной компенсации.
Алгоритм с учетом сцены: определение типа сцены с помощью ИИ (например, ночная сцена, портрет), вызов определенных стратегий калибровки и улучшение эффекта целевой оптимизации.
Отраслевые решения и типичные случаи
1. Huawei XD Fusion Pro: технология слияния RAW-файлов на нескольких камерах, внедрение семантической сегментации сцены при калибровке цвета и достижение унификации цвета между различными фокусными расстояниями.
2. Apple Deep Fusion: технология многокадрового синтеза в сочетании с ISP и нейронным движком для оптимизации цветового перехода при совместной работе нескольких камер.
3. Samsung Multi-Aperture Благодаря физической настройке диафрагмы и взаимодействию нескольких камер поддерживается единообразие цветов при различных условиях освещения.
Развитие тенденции
- Калибровка от периферии к облаку: благодаря постоянной оптимизации модели калибровки с использованием больших облачных данных устраняется отклонение между лабораторными данными и мировыми сценариями.
- Унифицированная конструкция на уровне аппаратного обеспечения: производители могут использовать одну и ту же модель датчика с различными оптическими решениями для уменьшения различий в цвете источника.
- Кросс-брендовая цветовая экосистема: установление отраслевых стандартов цвета для обеспечения единообразия цветов на различных устройствах.
Цветовая согласованность является основным порогом для опыта многокамерной системы. Ее технологический прорыв не только зависит от обновления оборудования, но и требует глубокой интеграции алгоритмов и данных. С появлением технологий искусственного интеллекта и сенсоров будущее многокамерной совместной работы будет продвигаться в сторону более интеллектуального и естественного представления цветов.