Обзор оптических вычислений до сенсора

Review of optical pre-sensor computing
Zheng Huang, Conghe Wang, Wanxin Shi, Shukai Wu, Yutong He, Yuting Li, Caihua Zhang, Hongwei Chen
2026-07-15

оптические операторы в свободном пространствемашинное зрениенелинейная оптическая активацияоптические нейронные сетиоптические вычисления перед сенсором
Стремительный прогресс в области искусственного интеллекта обусловил быстрое развитие машинного зрения в последние годы. Однако современные архитектуры по-прежнему опираются на каскадные этапы формирования изображений, сенсорного восприятия, передачи и обработки данных, что приводит к значительным перемещениям данных, энергопотреблению и задержкам. Для устранения этих узких мест вычисления постепенно переносятся ближе к источнику данных — от процессоров backend-уровня к вычислительным блокам, расположенным рядом с сенсором и непосредственно в сенсоре. Оптические вычисления до сенсора развивают эту тенденцию, перенося вычисления на еще более ранний этап и встраивая их непосредственно в процесс распространения света до фотодетектирования. Это позволяет извлекать релевантную для задачи визуальную информацию в оптической области, сокращая избыточный сбор данных и облегчая последующую электронную обработку. Благодаря присущим свету высокой скорости, широкой полосе пропускания и параллелизму эта новая парадигма открывает перспективный путь к эффективной обработке визуальной информации на переднем конце системы. В статье представлен всесторонний обзор последних достижений в области оптических вычислений до сенсора. Сначала рассматриваются архитектуры систем и подходы к их реализации. Затем обобщаются достижения в области оптических операторов в свободном пространстве, оптических нейронных сетей и нелинейных механизмов оптической активации. Наконец, обсуждаются ключевые проблемы и возможности визуального восприятия в рамках физического искусственного интеллекта, а также обозначаются перспективные направления развития оптических вычислений до сенсора для систем машинного зрения следующего поколения, особенно в части низкого энергопотребления, интеграции высокого уровня и реконфигурируемых архитектур.
1
Традиционные конвейеры машинного зрения требуют значительных перемещений данных, энергозатрат и времени из-за каскадного разделения формирования изображения, измерения, передачи и обработки.
2
Ключевыми направлениями развития являются низкое энергопотребление, высокая степень интеграции и реконфигурируемые архитектуры для машинного зрения следующего поколения и физического искусственного интеллекта.
3
Оптические вычисления до сенсора встраивают обработку целевой визуальной информации в распространение света до фотодетектирования, сокращая избыточный сбор данных и последующую электронную обработку.
4
Последние достижения включают свободнопространственные оптические операторы, оптические нейронные сети и нелинейные механизмы оптической активации, реализуемые в различных системных архитектурах.
5
Этот подход использует присущие свету высокие скорость, пропускную способность и параллелизм для эффективной предварительной обработки визуальной информации.

системы оптических вычислений до сенсора для предварительной обработки визуальной информации

архитектуры, практические схемы реализации, оптические операторы, нейросетевые и нелинейные механизмы активации, а также проблемы эффективности извлечения релевантной задаче визуальной информации до фотодетектирования

Publication Details
Publication Date
2026-07-15
Journal
Publisher
ISSN
Cited by
5
Access Type
Author Information
Authors
Zheng Huang
Conghe Wang
Wanxin Shi
Shukai Wu
Yutong He
Yuting Li
Caihua Zhang
Hongwei Chen
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat →
Make a presentation
100%