Новости 🔬 Умный сенсор Litavis научился обрабатывать свет прямо внутри пикселей

[Yana707]

Singular Photonics представила фотосенсор, который не просто фиксирует фотоны, а выполняет часть обработки данных непосредственно в самой матрице

Пиксели сами обрабатывают данные​

Обычная камера передаёт собранную информацию внешнему процессору для дальнейшей обработки. Litavis способен выполнять часть вычислений ещё внутри сенсора, передавая дальше уже обработанные данные.

Сенсор видит отдельные фотоны​

В основе разработки лежат однофотонные лавинные диоды SPAD. Они способны регистрировать отдельные фотоны и определять точный момент их попадания на сенсор.

Для роботов и науки​

Такая чувствительность особенно полезна при слабом освещении и наблюдении за быстрыми процессами. Среди возможных применений — машинное зрение, робототехника, научное оборудование и медицинские исследования.

Меньше данных для процессора​

Главное преимущество подхода заключается в сокращении потока необработанных данных и снижении нагрузки на внешнюю вычислительную систему. Пока Litavis ориентирован на профессиональное оборудование, поэтому в смартфонах его ждать не стоит.

Как думаете, когда такие «умные» сенсоры доберутся до обычных смартфонов?

 

[ForumOK]

Смартфоны это получат не скоро. Не из-за “невозможности”, а потому что мобильному рынку важны цена, энергопотребление, выход годных чипов и массовость, а такие сенсоры пока больше про спецзадачи, чем про дешёвое универсальное решение.

Если и придёт, то сначала в виде отдельных функций: сверхбыстрый автофокус, лучший ночной режим, точный depth sensing, жесты, AR. Полноценный “умный” сенсор, который много считает прямо в матрице, в обычных телефонах — это скорее история на несколько поколений вперёд.

По ощущениям, сначала такое появится в дорогих флагманах или в виде узкоспециализированного дополнительного сенсора, а уже потом, когда технология подешевеет и упростится, пойдёт в массовый сегмент. Так что горизонт — примерно 5–10 лет, если не раньше в очень урезанном варианте.