Русский
Как ИК-чувствительность влияет на проектирование камер ночного видения
Создано 10.10
Пройдитесь по любой выставке электроники, и вы увидите десятки камерных модулей, рекламируемых как «ночное видение 10 м» или «низкая освещённость 0,001 люкс». Мало какие характеристики разбрасываются так небрежно — и так неточно — как инфракрасная чувствительность. Однако для проектировщиков продуктов и инженерных команд ИК-чувствительность — это не маркетинговый пункт. Это основополагающее ограничение, которое формирует почти каждое решение в системе камеры ночного видения: от выбора сенсора и конструкции объектива до мощности подсветки, размера корпуса и даже срока службы батареи.
Большинство обсуждений ночного видения начинаются с инфракрасных светодиодов и заканчиваются обработкой видеосигнала. Эта статья придерживается иного подхода: она рассматривает ИК-чувствительность как основную проектную переменную и прослеживает её косвенное влияние на всю оптическую, электронную и механическую систему. Понимание этих взаимосвязей — это то, что отличает камеру, которая «работает ночью», от камеры, которая обеспечивает пригодное для использования изображение в реальных условиях, при реалистичной стоимости комплектующих и в рамках реалистичного энергопотребления.
Что на самом деле означает ИК-чувствительность (за пределами цифры в спецификации)
Прежде чем углубляться в проектирование системы, стоит уточнить, что именно мы подразумеваем, говоря «ИК-чувствительность». В спецификации датчика может быть указано минимальное значение освещённости, но одно это число почти ничего не говорит о реальной производительности ночного видения. Истинная ИК-чувствительность — это комплексное свойство, определяемое несколькими фундаментальными физическими характеристиками сенсора изображения.
На самом базовом уровне чувствительность описывает, насколько эффективно сенсор преобразует поступающие инфракрасные фотоны в измеримый электрический заряд. Это количественно выражается как квантовая эффективность (QE) в процентах на определённых длинах волн. Для камер ночного видения две наиболее важные длины волны — 850 нм и 940 нм, ближний инфракрасный диапазон, используемый почти всеми системами активной подсветки. Типичный CMOS-сенсор с фронтальным освещением может иметь QE 30–40% на 850 нм, тогда как высокочувствительный сенсор с обратным освещением может достигать 60–70% на той же длине волны. Эта разница может показаться скромной, но она напрямую определяет, какая мощность подсветки вам нужна или как далеко вы можете видеть ночью.
Квантовая эффективность, однако, — лишь половина истории. Другая половина — это шум. Сенсор, который создаёт большой темновой ток или шум считывания, может иметь превосходную квантовую эффективность и всё равно выдавать шумные, блёклые ночные изображения. Темновой ток — это заряд, накапливающийся в каждом пикселе даже в полной темноте под действием тепловых эффектов. Он экспоненциально растёт с температурой, поэтому уличные камеры в жарком климате часто справляются с качеством ночных изображений хуже, чем предсказывают технические характеристики. Шум считывания, напротив, вносится каждый раз, когда значение пикселя считывается с сенсора, и он становится доминирующим источником шума при очень коротких выдержках.
Именно поэтому показатель «минимальной освещённости» в техническом описании может так вводить в заблуждение. Это число почти всегда измеряется при максимальном усилении, максимально возможной выдержке и идеальной лабораторной температуре. В реальном изделии вы не можете работать на максимальном усилении, не разрушив детализацию изображения, не можете использовать многсекундные выдержки при съёмке движущихся объектов и уж точно не можете управлять температурой окружающей среды. Что действительно важно для проектирования — это отношение сигнал/шум (SNR) при заданном уровне освещённости, а оно зависит от совместной работы квантовой эффективности (QE), размера пикселя, темнового тока, шума считывания и полной ёмкости потенциальной ямы.
Есть ещё одна тонкость: чувствительность неоднородна по ближнему инфракрасному диапазону. Датчик, оптимизированный для 850 нм, может плохо работать на 940 нм, и наоборот. Это порождает один из самых ранних и самых значимых проектных выборов: какую длину волны подсветки стандартизировать. Диапазон 850 нм обеспечивает лучшую чувствительность датчика почти на всех кремниевых сенсорах — примерно на 30–50% более высокую квантовую эффективность по сравнению с 940 нм на типовых компонентах. Но излучатели на 850 нм дают слабое красное свечение на поверхности светодиода, заметное человеческому глазу на близком расстоянии. Для применений, где важна скрытность, 940 нм практически невидим — но за эту невидимость приходится платить сниженной чувствительностью. Это единственное решение о длине волны каскадно влияет на мощность подсветки, покрытие линз, выбор датчика и, в конечном счёте, на стоимость системы.
Основные компромиссы: почему более высокая чувствительность не всегда лучше
Интуитивно предполагается, что чем выше чувствительность, тем лучше. На практике чувствительность сенсора находится в центре многомерного пространства компромиссов, включающего разрешение, мощность, стоимость, динамический диапазон и термическую стабильность. Чрезмерное давление на чувствительность в одном измерении часто создаёт более серьёзные проблемы в других.
Чувствительность против разрешения
Самый мощный рычаг для повышения ИК-чувствительности — увеличение размера пикселя. Более крупные пиксели собирают больше фотонов, имеют более высокую полную ёмкость и, как правило, обеспечивают лучшее отношение сигнал/шум. Физика здесь однозначна: при прочих равных пиксель 3 мкм собирает примерно в 2,25 раза больше света, чем пиксель 2 мкм при той же экспозиции.
Загвоздка в том, что более крупные пиксели означают меньшее количество пикселей на единицу площади сенсора, или, как альтернатива, более крупный и дорогой кристалл сенсора для того же разрешения. Сенсор 1080p с пикселями 3 мкм требует значительно большего оптического формата, чем сенсор 1080p с пикселями 2 мкм, что, в свою очередь, требует более крупного объектива, более крупного корпуса и более дорогостоящего корпуса сенсора.
Для многих потребительских и массовых продуктов рынок требует одновременно более высокого разрешения и лучшего ночного видения — две цели, которые тянут в противоположные стороны. Команды разработчиков часто решают эту проблему, выбирая сенсор с меньшими пикселями, но более высокой квантовой эффективностью (обычно BSI-компонент), принимая более высокий уровень шума в обмен на сохранение разрешения. Именно поэтому у столь многих потребительских камер 4K впечатляющие дневные характеристики, но посредственная ночная съёмка: шаг пикселя просто слишком мал, чтобы собрать достаточно ИК-фотонов.
Чувствительность против энергопотребления
Энергопотребление часто является наиболее недооценённым побочным эффектом выбора чувствительности. Для камер с батарейным питанием — дверных звонков, камер для наблюдения за дикой природой, беспроводных камер безопасности — чувствительность в первую очередь не вопрос качества изображения. Это вопрос срока службы батареи.
Камера с датчиком низкой чувствительности вынуждена компенсировать это за счёт более высокого тока ИК-светодиодов, более длительных выдержек и более высокого усиления сенсора. Более высокий ток светодиодов напрямую потребляет больше энергии. Более длительные выдержки означают, что сенсор активен в течение большей части каждого кадра, что увеличивает энергопотребление. Более высокое усиление часто требует более агрессивного цифрового шумоподавления в ISP, что добавляет энергозатраты на обработку. Совокупный эффект может быть значительным: система с вдвое меньшей чувствительностью в ИК-диапазоне может потреблять в два-три раза больше энергии в ночном режиме для достижения того же эффективного качества изображения.
Для проводных камер это менее критично, но всё же влияет на тепловой режим, снижение номинальных характеристик компонентов и долгосрочную надёжность. Для устройств с батарейным питанием чувствительность напрямую определяет рабочий цикл, поведение при пробуждении и то, достигнет ли продукт заявленного времени автономной работы.
Чувствительность против стоимости
Высокочувствительные датчики стоят дороже. Это связано не только с тем, что они используют большую площадь кристалла — хотя это тоже фактор — но и с тем, что производственные процессы, обеспечивающие высокую квантовую эффективность и низкий темновой ток, более сложны и имеют меньший выход годных изделий. Датчики с обратной засветкой, например, требуют дополнительных технологических операций по сравнению с датчиками с фронтальной засветкой, а ценовая надбавка может составлять 2× и более при том же разрешении.
Картина затрат гораздо сложнее, чем просто цена сенсора. Более чувствительный сенсор может снизить затраты в других частях системы: меньшее количество или меньшая мощность ИК-светодиодов, более простая линза с меньшей светосилой, менее мощный ISP и меньший радиатор. В некоторых случаях переход на более дорогой сенсор фактически снижает общую стоимость спецификации материалов, поскольку ослабляет ограничения для всех остальных компонентов. Верно и обратное: выбор дешёвого сенсора ради экономии нескольких долларов может вынудить вас использовать гораздо более дорогую оптическую систему и систему подсветки.
Чувствительность и термическая стабильность
Высокочувствительные сенсоры часто более восприимчивы к изменениям температуры. Темновой ток примерно удваивается при каждом повышении температуры сенсора на 6–8 °C, поэтому камера, находящаяся под прямыми солнечными лучами днём, к вечеру может показать существенное увеличение уровня шума в ночном режиме. Для наружных установок в климате с большими перепадами температур это создаёт скрытую переменную производительности, которую почти никогда не отражают в технических характеристиках.
Именно поэтому датчики промышленного и автомобильного класса часто нормируют темновой ток в зависимости от температуры, и поэтому такие компоненты стоят дороже. В потребительских продуктах разработчики часто допускают некоторые колебания тепловых характеристик в обмен на более низкую стоимость — но они должны проверять работу при экстремальных температурах, а не только при комнатной.
Как ИК-чувствительность определяет оптическую конструкцию
Датчик не работает изолированно. Оптическая система — объектив, набор фильтров и апертура — определяет, сколько доступных ИК-фотонов действительно достигает поверхности датчика. Поэтому требования к чувствительности определяют важные решения в области оптической конструкции.
Апертура и стоимость объектива
Диафрагменное число объектива показывает, сколько света он может передать на сенсор. Объектив f/1.4 собирает в четыре раза больше света, чем объектив f/2.8. Для сенсора с низкой чувствительностью получение пригодных для использования ночных изображений часто требует очень светосильного объектива — f/1.8 или быстрее — для компенсации.
Светосильные объективы дороги. Они требуют большего количества элементов, более точной юстировки и большего диаметра стекла. Они также, как правило, имеют худшую резкость по углам, большую хроматическую аберрацию и большее дисторсию, и всё это необходимо исправлять либо оптически, либо в ISP. В частности, для широкоугольных камер разработка светосильного объектива f/1.4 с приемлемой равномерностью по всему полю зрения — одна из самых сложных инженерных задач во всей системе.
Более чувствительный сенсор снимает это ограничение. Если сенсор вдвое чувствительнее в ИК-диапазоне, можно использовать объектив f/2.0 вместо f/1.4 и получить такое же эффективное светособирание. Такой более медленный объектив будет дешевле, компактнее, резче по всему полю и проще в массовом производстве. Это одно из наиболее недооценённых преимуществ выбора более чувствительного сенсора на уровне системы: он существенно упрощает оптическую конструкцию.
ИК-покрытия и спектральное согласование
Линзы не одинаково пропускают свет на всех длинах волн. Просветляющие покрытия настроены на определённые диапазоны, а стеклянные материалы имеют разные характеристики пропускания в ближнем инфракрасном диапазоне. Если пиковая чувствительность вашего сенсора находится на 850 нм, но покрытие вашей линзы оптимизировано для видимого света, вы теряете значительную часть бюджета чувствительности ещё до того, как фотоны достигнут кремния.
Именно поэтому в серьёзных конструкциях приборов ночного видения указываются объективы с покрытиями, скорректированными для ИК-диапазона и согласованными с длиной волны подсветки. Разница между стандартным покрытием для видимого света и покрытием, оптимизированным для 850 нм, может составлять 10–20% пропускания на соответствующей длине волны — этого достаточно, чтобы изменить всё требование к мощности подсветки. Для систем на 940 нм оптимизация покрытия ещё важнее, поскольку датчик на этой длине волны уже менее чувствителен; вы не можете позволить себе терять дополнительные фотоны в объективе.
Архитектура ИК-фильтра
Почти все цветные камеры используют ИК-фильтр в дневное время для блокировки инфракрасного света, который в противном случае искажал бы цветопередачу. Ночью этот фильтр необходимо удалить или переключить, чтобы инфракрасный свет достиг сенсора. Наиболее распространённый подход — механический ИК-фильтр (ICR), который физически вводит один из двух фильтров в оптический путь.
Чувствительность сенсора напрямую влияет на то, нужен ли вам вообще ICR и какой тип использовать. Сенсоры с очень высокой чувствительностью иногда могут обеспечивать приемлемую ночную производительность даже при оставленном инфракрасном фильтре, полностью устраняя механический механизм и повышая надёжность. Однако для большинства конструкций ICR обязателен — но характеристики пропускания ночного фильтра выбираются на основе кривой чувствительности сенсора.
Существует также появляющийся компромиссный вариант: сенсоры «день-ночь» без подвижного фильтра, использующие шаблон фильтра на уровне пикселей, который пропускает как видимый, так и ИК-свет. Они жертвуют некоторой точностью цветопередачи в дневное время ради более простой механики и лучшей надёжности. Их реальная ночная производительность сильно зависит от того, сколько ИК-света фактически пропускает стек фильтров — ещё один случай, когда собственная чувствительность сенсора является лишь частью уравнения.
Равномерность по краям
Одним из часто упускаемых из виду оптических эффектов является виньетирование в инфракрасном диапазоне. Многие объективы с хорошей равномерностью в видимом свете демонстрируют значительное падение освещённости по углам при использовании на длинах волн 850 нм или 940 нм. Этот эффект усиливается с увеличением относительного отверстия и расширением поля зрения.
При высокочувствительном сенсоре умеренное виньетирование по углам допустимо, поскольку в центре изображения всё ещё достаточно высокое отношение сигнал/шум, а углы можно скорректировать цифровым способом. При низкочувствительном сенсоре углы могут полностью опуститься ниже полезного уровня шума, что приведёт к чёрным углам в ночное время. Это вынуждает оптических проектировщиков либо использовать более равномерную (и более дорогую) конструкцию объектива, либо увеличивать мощность подсветки по краям поля зрения — что порождает собственные проблемы с горячими точками и энергопотреблением.
Проектирование освещения: другая сторона уравнения чувствительности
Активное инфракрасное освещение — это то, что заставляет работать большинство камер ночного видения. Связь между чувствительностью сенсора и проектированием освещения прямая: каждый децибел чувствительности, который вы получаете на стороне сенсора, — это децибел мощности освещения, который вы можете убрать из системы. Именно здесь решения по чувствительности имеют наиболее очевидные последствия для стоимости и размеров.
Мощность и количество излучателей
Самый простой способ думать об этом — с точки зрения бюджета оптической мощности. Для заданной дистанции до сцены и желаемой яркости изображения существует фиксированное количество ИК-фотонов, которые должны отразиться от сцены и вернуться в камеру. Если датчик в два раза чувствительнее, вам нужно в два раза меньше фотонов, достигающих объектива. С учетом всех потерь в системе — атмосферного ослабления, потерь на отражение, пропускания объектива — это примерно соответствует половине мощности освещения.
Снижение мощности освещения вдвое даёт каскадные преимущества. Можно использовать меньше светодиодов, меньшие радиаторы, более простую схему управления и меньший блок питания. Для потребительских камер это часто означает разницу между конструкцией, которая помещается в компактный корпус, и той, которая требует громоздкого корпуса для отвода тепла. Для устройств с батарейным питанием это может удвоить или утроить время работы батареи в ночном режиме.
Возвращаясь к длине волны: 850 нм против 940 нм
Ранее мы затрагивали разницу в чувствительности между 850 нм и 940 нм. Эта разница является доминирующим фактором при выборе длины волны.
На длине волны 850 нм типичные кремниевые сенсоры имеют существенно более высокую квантовую эффективность, а инфракрасные светодиоды также более эффективно преобразуют электрическую мощность в оптическое излучение. Это сочетание означает, что система на 850 нм может обеспечить такое же освещение сцены при значительно меньшем энергопотреблении. Недостатком является слабое красное свечение, видимое человеческим глазом, что неприемлемо для скрытого наблюдения и нежелательно для потребительских камер, размещённых вблизи жилых помещений.
На длине волны 940 нм светодиоды не дают вообще никакого видимого свечения — но квантовая эффективность сенсора падает примерно на 30–50% у большинства компонентов, а внешняя квантовая эффективность светодиодов также ниже. Итоговый эффект таков: системе на 940 нм требуется примерно вдвое большая входная электрическая мощность, чтобы достичь той же яркости ночного изображения, что и эквивалентной системе на 850 нм. Это огромная разница. Команды проектировщиков, которые переходят с 850 нм на 940 нм по косметическим причинам, часто недооценивают, насколько сильнее им приходится форсировать систему подсветки и насколько больше тепла им приходится отводить.
Более чувствительные сенсоры сокращают этот разрыв. Если выбрать сенсор с особенно хорошим откликом на длине волны 940 нм — некоторые специализированные компоненты оптимизированы для этого диапазона — можно значительно снизить энергетические потери. Это одна из самых распространённых причин, по которой разработчики переходят на сенсоры премиум-класса: не для того, чтобы получить лучшую производительность на 850 нм, а для того, чтобы сделать освещение на 940 нм жизнеспособным в рамках разумного энергопотребления.
Угол луча и равномерность
Равномерность освещения описывает, насколько равномерно инфракрасный свет покрывает сцену. Плохая равномерность приводит к яркому пятну в центре изображения и тёмным углам.
Вопреки интуиции, низкочувствительные сенсоры на самом деле затрудняют достижение однородности. Когда сенсор находится вблизи уровня шума на краях изображения, даже небольшие колебания интенсивности освещения создают большие воспринимаемые различия в яркости. При более чувствительном сенсоре всё изображение находится выше уровня шума с комфортным запасом, поэтому вариации освещения гораздо менее заметны.
Это означает, что системы с более высокой чувствительностью могут использовать более простую и менее дорогую осветительную оптику — стандартные отражатели или рассеиватели вместо прецизионно формованных свободноформных линз. Особенно для широкоугольных камер это значительная экономия средств.
Дальность и расстояние обнаружения
Дальность ночного видения — одна из наиболее рекламируемых и наименее понятных характеристик. Максимальное расстояние, на котором камера может обнаружить или распознать объект ночью, зависит от многих факторов, но чувствительность сенсора является базовым показателем.
Обычно считается, что удвоение чувствительности увеличивает полезную дальность обнаружения примерно на 40% при условии, что мощность освещения остаётся неизменной. Это следует из закона обратных квадратов: интенсивность освещения падает пропорционально квадрату расстояния, поэтому, чтобы видеть на 40% дальше, требуется примерно вдвое большая чувствительность (или вдвое большая мощность). Именно поэтому в промышленных камерах и камерах для периметра большой дальности почти повсеместно используются крупнопиксельные высокочувствительные сенсоры в сочетании с мощной инфракрасной подсветкой. Невозможно получить ночное видение на 100+ метров с помощью потребительского сенсора с мелкими пикселями, сколько бы светодиодов вы ни прикрепили к его передней части.
ISP и обработка изображения: компенсация ограничений чувствительности
Ни одно обсуждение проектирования систем ночного видения не обходится без упоминания процессора обработки сигналов изображения. ISP не может создать фотоны, которые не были собраны, но он способен кардинально улучшить воспринимаемое качество изображения при низкой освещённости — и тем самым меняет представление о том, насколько высокая собственная чувствительность сенсора вам действительно нужна.
Стратегии шумоподавления
Цифровое шумоподавление (DNR) — основной инструмент повышения качества изображения при слабом освещении. 2D DNR работает в пределах одного кадра, сглаживая шум и пытаясь сохранить границы. 3D DNR, или временное шумоподавление, объединяет информацию из нескольких кадров, чтобы подавлять шум гораздо более агрессивно.
Временное DNR удивительно эффективно — оно может улучшить эффективное отношение сигнал/шум на 6 дБ или более, что эквивалентно четырехкратному увеличению чувствительности сенсора или четырехкратному увеличению мощности освещения. Но у него есть компромиссы. Движущиеся объекты оставляют шлейфы-призраки, быстрое движение может размываться, а алгоритм требует тщательной настройки для каждого сценария использования. Для статичных сцен (внутреннее видеонаблюдение, охрана периметра) он работает чрезвычайно хорошо. Для сцен с быстрым движением (камеры на дорогах, нательные камеры) он гораздо менее эффективен.
Это создаёт интересную динамику проектирования: для приложений со статичными сценами вы часто можете использовать датчик с более низкой чувствительностью и полагаться на 3D DNR, чтобы компенсировать разницу. Для приложений с высоким движением это невозможно — вам нужна собственная чувствительность датчика. Многие продуктовые команды усвоили это на горьком опыте: указывали дешёвый датчик, предполагая, что программное обеспечение исправит шум, и лишь потом обнаруживали, что размытие при движении неприемлемо для их сценария использования.
Экспозиция и частота кадров
Другой способ компенсировать низкую чувствительность — увеличить время экспозиции. Более длительные экспозиции собирают больше фотонов, улучшая SNR за счёт частоты кадров и размытия движения.
Для камер, которым нужно снимать только статичные сцены при 10–15 кадрах в секунду, длинные выдержки — разумный компромисс. Для камер, которым нужно 30 кадров в секунду или выше, либо которым нужно замораживать движение, время экспозиции ограничено периодом кадра. Камера с 30 кадрами в секунду имеет максимальную экспозицию примерно 33 мс на кадр — а на практике гораздо меньше, потому что сенсору требуется время на считывание. Этот жёсткий предел — причина, по которой высокоскоростные системы ночного видения требуют самых чувствительных сенсоров из доступных; обойти бюджет экспозиции просто невозможно.
WDR и чувствительность
Широкий динамический диапазон (WDR) — крайне востребованная функция для дневных камер, которые сталкиваются с высококонтрастными сценами, такими как окна или освещённые солнцем входы. Однако большинство режимов WDR с многократной экспозицией снижают эффективную чувствительность при слабом освещении.
Причина проста: WDR работает путём объединения короткой и длинной экспозиций. Короткая экспозиция захватывает яркие светлые участки, но почти ничего не вносит в уровень шума в тёмных областях. Длинная экспозиция часто короче, чем была бы в режиме без WDR, потому что она делит период кадра с другими экспозициями. Итоговый результат таков: включение WDR может снизить эффективную ночную чувствительность на 30–50% на многих сенсорах.
Это вынуждает сделать выбор при проектировании: отдать приоритет дневному динамическому диапазону или ночной чувствительности. Некоторые премиальные сенсоры предлагают отдельные режимы работы с расширенным динамическим диапазоном (WDR) и для слабой освещённости, которые автоматически переключаются между днём и ночью, но это усложняет прошивку ISP. Во многих разработках команды мирятся с ухудшением WDR ночью в обмен на лучшую чувствительность — но этот компромисс редко чётко разъясняется в маркетинговых материалах.
Ночное видение с ИИ
В последние годы улучшение изображения при слабой освещённости на основе ИИ перешло из исследовательских лабораторий в производственные конвейеры ISP. Нейронные сети, обученные на миллионах пар изображений, снятых при слабом и хорошем освещении, могут восстанавливать детали и подавлять шум так, как это недоступно традиционной обработке сигналов.
Влияние значительно, но часто преувеличивается. Улучшение с помощью ИИ может сделать шумные изображения более чистыми и детализированными, а также может достаточно снизить воспринимаемый шум, чтобы сенсор средней чувствительности по качеству изображения работал как высокочувствительный. Чего он не может сделать — так это восстановить детали, которые изначально не были зафиксированы. Если сигнал настолько утопает в шуме, что даже алгоритм не может отличить его от случайных колебаний, никакое количество ИИ не вернёт его обратно.
Для проектировщиков продуктов практический вывод таков: ИИ-улучшение снижает требование к чувствительности — но только на один уровень. Всё ещё нужен сенсор, обеспечивающий базовое отношение сигнал/шум выше определённого порога. ИИ не заменяет принципиально достаточный сбор фотонов.
Выбор конструкции под конкретное применение
Разные приложения оценивают эти компромиссы совершенно по-разному. Потребительская дверная камера и промышленная камера периметра — обе являются «камерами ночного видения», но их приоритеты чувствительности почти противоположны.
Потребительские камеры безопасности и умного дома
Потребительские товары находятся под давлением стоимости и ограничений форм-фактора. Проектные команды здесь обычно выбирают датчики среднего класса с умеренной чувствительностью, сочетают их с подсветкой 940 нм по косметическим причинам и в значительной степени полагаются на шумоподавление ISP и улучшение с помощью ИИ для обеспечения приемлемого качества изображения.
Самая большая проблема в этой категории — это баланс между маркетинговыми заявлениями о разрешении и реальной ночной съёмкой. Многие потребительские камеры с разрешением 4K и 5 МП используют очень маленькие пиксели, чтобы при низкой стоимости достичь высоких показателей разрешения, что приводит к плохой чувствительности в ИК-диапазоне. Затем ночное изображение подвергается интенсивной обработке, чтобы выглядеть чистым на экране телефона, но мелкие детали при этом теряются. Для многих потребителей этот компромисс приемлем — им важнее цифра разрешения на коробке, чем возможность разглядеть лицо человека на расстоянии 20 метров ночью, — но это вызывает настоящее разочарование, когда ожидания не совпадают с реальностью.
Промышленная и периметральная безопасность
В промышленных камерах дальнего радиуса действия чувствительность имеет приоритет почти над всем остальным. Такие системы обычно используют датчики с крупными пикселями (часто 3 мкм и более), подсветку на длине волны 850 нм для максимальной эффективности и мощные ИК-матрицы с точным формированием луча. Разрешение часто составляет 1080p или 2 МП — скромно по потребительским меркам — потому что добавление большего числа пикселей снизило бы чувствительность и неоправданно увеличило бы пропускную способность передачи данных.
Промышленные конструкции также уделяют гораздо больше внимания термической стабильности и производительности при изменении температуры. Удвоение темнового тока при высоких температурах не является приемлемой неожиданностью в развёрнутой системе безопасности, поэтому сенсоры выбираются и сортируются на основе характеристик темнового тока, а не только квантовой эффективности.
Камеры с батарейным питанием и маломощные камеры
Для беспроводных камер, дверных звонков и устройств на солнечных батареях чувствительность в первую очередь является вопросом энергопотребления. Каждый дополнительный микроампер тока ИК-светодиода напрямую сокращает срок службы батареи.
Проекты в этой категории почти всегда выбирают датчик с наивысшей чувствительностью в рамках своего ценового диапазона, поскольку экономия мощности подсветки напрямую преобразуется либо в увеличение срока службы батареи, либо в уменьшение её размеров и стоимости. Они также, как правило, используют импульсную подсветку — включение инфракрасных светодиодов только во время экспозиции — для минимизации средней потребляемой мощности. Наиболее чувствительные компоненты могут даже работать в пассивном ночном режиме без активной подсветки при лунном свете или звёздном освещении, что кардинально меняет ситуацию с энергопотреблением.
Автомобильная и транспортная отрасль
Автомобильное ночное видение работает в одной из самых суровых сред для датчиков изображения. Экстремальные температуры, вибрация и строгие требования к надежности резко сужают выбор датчиков.
Автомобильные датчики, как правило, обладают хорошей, но не выдающейся чувствительностью в ИК-диапазоне, поскольку требования к темновому току и температурному дрейфу у них гораздо строже, чем у потребительских компонентов. Автомобильные системы также часто используют подсветку с длиной волны 940 нм, чтобы не мешать зрению водителя и соответствовать нормативным требованиям к неослепляющему освещению. Сочетание умеренной чувствительности и длины волны 940 нм означает, что автомобильные системы ИК-подсветки на удивление энергозатратны, что требует тщательного управления тепловым режимом внутри фары или корпуса датчика.
Биометрические и ближние сенсорные системы
Не всё ночное видение предназначено для того, чтобы видеть далеко. Биометрические камеры, модули распознавания лиц и камеры для инспекции работают на коротких дистанциях, но часто требуют очень специфической чувствительности к длине волны инфракрасного излучения.
Системы распознавания лиц, например, обычно используют подсветку с длиной волны 940 нм для безопасности глаз и невидимости, а также выбирают сенсоры с оптимизированной квантовой эффективностью (QE) на длине волны 940 нм. Поскольку рабочее расстояние невелико, мощность подсветки низкая, и основная проблема чувствительности заключается в обеспечении равномерного отклика по всему лицу при обработке вариаций отражательной способности кожи. Такие конструкции также часто используют специализированные полосовые фильтры, точно согласованные с длиной волны подсветки, чтобы отсекать окружающий свет и максимизировать эффективную чувствительность.
Новые технологии, меняющие ландшафт чувствительности
Основы инфракрасной чувствительности не претерпели кардинальных изменений за последнее десятилетие — кремний по-прежнему имеет примерно ту же кривую квантовой эффективности в ближней инфракрасной области. Однако несколько новых технологий существенно меняют компромиссы при проектировании.
Обратная подсветка выходит на массовый рынок
Сенсоры BSI когда-то были премиальными компонентами, встречавшимися только в высококлассных камерах и смартфонах. Сегодня они доступны в широком диапазоне разрешений и ценовых категорий, в том числе для встраиваемых и охранных применений. Переход с FSI на BSI обычно обеспечивает улучшение квантовой эффективности на 30–50% в инфракрасном диапазоне длин волн, чего достаточно для изменения всей расчётной точки системы.
Поскольку BSI становится стандартом даже для сенсоров среднего класса, базовые ожидания по производительности ночного видения растут. Продукты, которые пять лет назад считались высокопроизводительными, теперь стали обязательным минимумом, и проектные команды используют дополнительный запас чувствительности для снижения мощности освещения, уменьшения габаритов или перехода с 850 нм на 940 нм без потери мощности.
Коротковолновый инфракрасный диапазон
Традиционное ночное видение работает в ближнем инфракрасном диапазоне 700–1000 нм, где кремниевые сенсоры чувствительны. Коротковолновый инфракрасный диапазон (SWIR), примерно 1000–1700 нм, обеспечивает другие характеристики изображения — лучшее проникновение через туман, дым и некоторые материалы, а также иное поведение контраста для материалов и кожи.
SWIR-сенсоры исторически были непомерно дорогими, поскольку основывались на технологии InGaAs. Новые подходы на основе кремния, включая кремний с расширенным диапазоном длин волн и сенсоры на квантовых точках, делают SWIR-чувствительность доступной в более низких ценовых диапазонах. Для промышленных и автомобильных применений это открывает новые возможности ночного видения, которые либо вообще не полагаются на активную подсветку, либо используют совершенно иные диапазоны подсветки. Технология ещё не готова для массовых потребительских продуктов, но она развивается быстро.
Событийное зрение
Событийные камеры, или динамические сенсоры зрения, работают по совершенно иному принципу, чем кадровые камеры. Каждый пиксель независимо сообщает об изменениях интенсивности света, а не захватывает полный кадр через фиксированные интервалы. Это обеспечивает им чрезвычайно высокое временное разрешение и практически полное отсутствие размытия при движении.
Для ночного видения событийные камеры обладают интересными свойствами. Поскольку они не накапливают заряд в течение фиксированных периодов экспозиции, они ведут себя иначе при низком освещении, чем традиционные сенсоры. Они способны обнаруживать движение и границы при уровнях освещённости, при которых кадровые сенсоры были бы полностью тёмными. Компромисс заключается в том, что они не создают традиционных изображений — они генерируют поток событий — что требует совершенно иной обработки и подходит не для всех применений. Однако для таких сценариев использования, как обнаружение вторжений или запись по движению, событийные сенсоры открывают путь к работе ночью при чрезвычайно низком энергопотреблении, не ограниченному теми же ограничениями чувствительности, что и кадровые формирователи изображений.
Практическое руководство для проектных групп
Со всеми этими взаимосвязанными переменными, как на самом деле принять правильные решения по чувствительности в начале проекта? Несколько принципов неизменно отличают хорошо оптимизированные проекты от тех, которые сталкиваются с проблемами на поздних этапах цикла.
Во-первых, определите требования к ночной производительности в реальных, а не паспортных терминах. «0,1 люкса» — это не требование. «Распознать человеческое лицо на расстоянии 15 метров при освещённости 0,05 люкса с подсветкой 940 нм» — это требование. Как только у вас есть конкретная цель по производительности, можно пройти систему в обратном порядке: рассчитать требуемое отношение сигнал/шум, определить, сколько фотонов должно достичь сенсора, и отсюда вывести требуемую чувствительность, апертуру объектива и мощность подсветки.
Во-вторых, оптимизируйте систему, а не компоненты. Самый дешёвый сенсор не даст вам самую дешёвую систему, если он вынуждает вас использовать более дорогой объектив и комплект подсветки. Прежде чем окончательно выбрать сенсор, просчитайте модели общей стоимости системы для нескольких уровней чувствительности. Вы часто обнаружите, что переход на один уровень сенсора выше снижает общую стоимость спецификации.
В-третьих, проводите проверку при экстремальных температурах на раннем этапе. Большинство неожиданностей в работе приборов ночного видения связано с ростом темнового тока при высоких температурах, а не с плохой чувствительностью при комнатной температуре. Испытайте опытные образцы при верхней границе вашего рабочего диапазона температур, прежде чем окончательно утвердить конструкцию. Если вы дождётесь испытаний на соответствие требованиям, будет уже слишком поздно менять датчик.
И наконец, будьте реалистами в отношении того, что может делать программное обеспечение. Настройка ISP и улучшение с помощью ИИ — это мощные инструменты, но они не волшебство. Проектируйте систему на основе сенсора, который обеспечивает необходимый вам базовый SNR, а затем используйте программное обеспечение, чтобы сделать его лучше. Проектирование на основе сенсора, который изначально слишком чувствителен и не имеет достаточной чувствительности, и надежда на то, что прошивка это исправит, — одна из наиболее распространённых причин неудач при разработке продуктов ночного видения.
Заключительные мысли
Инфракрасная чувствительность выглядит как одно число в техническом описании сенсора, но на самом деле это отправная точка для целой системы проектных компромиссов. Каждый выбор — размер пикселя, длина волны освещения, диафрагма объектива, энергопотребление, форм-фактор и стоимость — связан с этим одним фундаментальным свойством сенсора изображения.
Лучшие конструкции ночного видения — это не те, у которых самый высокий показатель чувствительности. Это те, которые соответствуют уровню чувствительности фактическим требованиям применения, а затем оптимизируют все остальные части системы вокруг этого выбора. Камера, в которой используется сенсор среднего класса, но которая имеет хорошо согласованную оптическую систему, эффективное освещение и продуманную настройку ISP, почти всегда будет превосходить камеру с премиальным сенсором, помещённым в плохо оптимизированный механический и оптический корпус.По мере того как сенсорные технологии продолжают совершенствоваться, а возможности ИИ-обработки растут, базовый уровень чувствительности будет продолжать повышаться. Однако фундаментальные компромиссы — между чувствительностью и разрешением, мощностью, стоимостью и размером — никуда не исчезнут. Именно их глубокое понимание позволяет командам разработчиков создавать продукты ночного видения, которые оправдывают заявленные обещания, а не просто хорошо выглядят в спецификации.
Контакт
Оставьте свои контактные данные, и мы свяжемся с вами.
WhatsApp
WeChat