База данных и методология оценки оптического потока

A Database and Evaluation Methodology for Optical Flow
Richard Szeliski, Stefan Roth, John Lewis, Michael J. Black, Simon Baker, Daniel Scharstein
2010-11-29

эталонные наборы данныхошибка конечной точкиэталонное поле движенияразрывы движенияоптический поток
Количественная оценка алгоритмов оптического потока, выполненная Barron и соавторами (1994), привела к значительному повышению их эффективности. Современные задачи, стоящие перед алгоритмами оптического потока, выходят за рамки наборов данных и методов оценки, предложенных в этой работе. Они связаны прежде всего с проблемами, характерными для сложных естественных сцен, включая нерегидное движение, реальные шумы сенсоров и разрывы движения. Мы предлагаем новый набор тестов и методов оценки для алгоритмов оптического потока следующего поколения. Для этого мы предоставляем четыре типа данных, предназначенных для проверки различных аспектов алгоритмов оптического потока: (1) последовательности с нерегидным движением, в которых эталонный поток определяется путем отслеживания скрытой флуоресцентной текстуры; (2) реалистичные синтетические последовательности; (3) видеозаписи с высокой частотой кадров, используемые для изучения ошибки интерполяции; и (4) модифицированные стереопоследовательности статичных сцен. Помимо средней угловой ошибки, использованной Barron и соавторами, мы вычисляем абсолютную ошибку конечной точки потока, показатели ошибки интерполяции кадров, улучшенные статистические характеристики, а также результаты в областях разрывов движения и областях без текстуры. В октябре 2007 года мы опубликовали результаты нескольких хорошо известных методов на предварительной версии наших данных, чтобы установить современный уровень развития. Мы также сделали эти данные свободно доступными в интернете по адресу http://vision.middlebury.edu/flow/. Впоследствии ряд исследователей загрузили на наш веб-сайт свои результаты и опубликовали статьи, использующие эти данные. Уже достигнуто значительное повышение эффективности. В этой статье мы анализируем полученные к настоящему времени результаты и делаем на их основе большое число выводов.
1
Анализ представленных результатов показывает значительное улучшение производительности и позволяет сделать обобщённые выводы о преимуществах и недостатках существующих алгоритмов.
2
Оценивание расширяет среднюю угловую ошибку показателями конечной ошибки потока, ошибкой интерполяции кадров, улучшенной статистикой и отдельным анализом разрывов движения и текстурно однородных областей.
3
Авторы сделали набор данных и результаты тестирования общедоступными, что позволило исследователям загружать результаты и сравнивать методы оптического потока.
4
Набор данных включает четыре типа данных: последовательности с флуоресцентной текстурой и истинным потоком, реалистичные синтетические последовательности, высокочастотное видео для оценки интерполяции и модифицированные стереопоследовательности статичных сцен.
5
Работа представляет новые тесты для оптического потока, ориентированные на нестационарное движение, реальные сенсорные шумы, разрывы движения и другие сложные природные сцены.

алгоритмы оптического потока, оцениваемые на эталонных видеопоследовательностях, представляющих нерегулярное движение, реалистичное синтетическое движение, интерполяцию кадров и статические стереосцены

производительность алгоритмов и метрики оценки в условиях сложных сцен, включая нерегулярное движение, шум сенсора, разрывы движения, ошибку интерполяции кадров и области без текстуры

Publication Details
Publication Date
2010-11-29
Journal
Publisher
ISSN
Access Type
Author Information
Authors
Richard Szeliski
Stefan Roth
John Lewis
Michael J. Black
Simon Baker
Daniel Scharstein
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%