Point TransformerS3DIS mIoU 70.4% (Area 5)сегментация частей объектасамовнимание для point cloudсемантическая сегментация сцены
Figures from the paper
Abstract (AI)
Сети с механизмом самовнимания произвели революцию в обработке естественного языка и добиваются заметных успехов в задачах анализа изображений, таких как классификация изображений и обнаружение объектов. Вдохновленные этим успехом, мы исследуем применение сетей с самовниманием к обработке 3D облаков точек. Мы разрабатываем слои самовнимания для облаков точек и используем их для построения сетей с самовниманием для таких задач, как семантическая сегментация сцен, сегментация частей объектов и классификация объектов. Наша архитектура Point Transformer превосходит предшествующие методы по различным областям и задачам. Например, на сложном датасете S3DIS для масштабной семантической сегментации сцен Point Transformer достигает mIoU 70,4% на зоне Area 5, превосходя сильнейшую предыдущую модель на 3,3 процентных пункта и впервые преодолевая порог mIoU в 70%.
Key Findings
1
Построены сети Point Transformer с использованием этих слоев самовнимания для задач сегментации и классификации точечных облаков.
2
Разработаны слои самовнимания, специально предназначенные для обработки 3D точечных облаков.
3
В задаче крупномасштабной семантической сегментации S3DIS (Area 5) Point Transformer достигает 70.4% mIoU, опережая сильнейшую предыдущую модель на 3.3 процентных пункта.
4
Point Transformer превосходит предыдущие методы в нескольких областях и задачах (семантическая сегментация сцен, сегментация частей объектов, классификация объектов).
5
Point Transformer является первой моделью, превысившей порог 70% mIoU на S3DIS Area 5.
Research Object
Нейросетевая модель Point Transformer для обработки 3D точечных облаков
Research Subject
Применение и оценка слоёв/сетей само-внимания к 3D точечным облакам для семантической сегментации сцен, сегментации частей объектов и классификации объектов, включая улучшение mIoU на наборе данных S3DIS
Publication Details
Publication Date
2021-10-01
Journal
Publisher
ISSN
Cited by
2400
Access Type
Author Information
Download PDF
Subscribe to digest