Point Transformer

Point Transformer
Hengshuang Zhao, Jiaya Jia, Philip H. S. Torr, Li Jiang, Vladlen Koltun
2021-10-01

Point TransformerS3DIS mIoU 70.4% (Area 5)сегментация частей объектасамовнимание для point cloudсемантическая сегментация сцены
Сети с механизмом самовнимания произвели революцию в обработке естественного языка и добиваются заметных успехов в задачах анализа изображений, таких как классификация изображений и обнаружение объектов. Вдохновленные этим успехом, мы исследуем применение сетей с самовниманием к обработке 3D облаков точек. Мы разрабатываем слои самовнимания для облаков точек и используем их для построения сетей с самовниманием для таких задач, как семантическая сегментация сцен, сегментация частей объектов и классификация объектов. Наша архитектура Point Transformer превосходит предшествующие методы по различным областям и задачам. Например, на сложном датасете S3DIS для масштабной семантической сегментации сцен Point Transformer достигает mIoU 70,4% на зоне Area 5, превосходя сильнейшую предыдущую модель на 3,3 процентных пункта и впервые преодолевая порог mIoU в 70%.
1
Построены сети Point Transformer с использованием этих слоев самовнимания для задач сегментации и классификации точечных облаков.
2
Разработаны слои самовнимания, специально предназначенные для обработки 3D точечных облаков.
3
В задаче крупномасштабной семантической сегментации S3DIS (Area 5) Point Transformer достигает 70.4% mIoU, опережая сильнейшую предыдущую модель на 3.3 процентных пункта.
4
Point Transformer превосходит предыдущие методы в нескольких областях и задачах (семантическая сегментация сцен, сегментация частей объектов, классификация объектов).
5
Point Transformer является первой моделью, превысившей порог 70% mIoU на S3DIS Area 5.

Нейросетевая модель Point Transformer для обработки 3D точечных облаков

Применение и оценка слоёв/сетей само-внимания к 3D точечным облакам для семантической сегментации сцен, сегментации частей объектов и классификации объектов, включая улучшение mIoU на наборе данных S3DIS

Publication Details
Publication Date
2021-10-01
Journal
Publisher
ISSN
Cited by
2400
Access Type
Author Information
Authors
Hengshuang Zhao
Jiaya Jia
Philip H. S. Torr
Li Jiang
Vladlen Koltun
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%