博客
关于我
3D Object Detection with Pointformer
阅读量:579 次
发布时间:2019-03-09

本文共 977 字,大约阅读时间需要 3 分钟。

没错!Transformer的"魔爪"已经伸向3D目标检测了。

Pointformer:用于3D点云的特征学习backbone,可结合并提高现有的3D点云目标检测网络性能,如VoteNet、PointRCNN和CBGS等。

注:文末附【Transformer】和【3D目标检测】学习交流群

Transformer最近在3D点云方向应用的工作可以看一下:

Pointformer

3D Object Detection with Pointformer

在这里插入图片描述

  • 作者单位:清华大学(黄高团队), 亚马逊Alexa AI等
  • 论文:https://arxiv.org/abs/2012.11409

由于3D点云数据的不规则性,从点云进行3D目标检测的特征学习非常具有挑战性。

在本文中,我们提出了Pointformer,这是专为3D点云设计的Transformer backbone,可以有效地学习特征。

在这里插入图片描述

具体而言,采用Local Transformer模块对局部区域中的点之间的交互进行建模,从而在对象级别学习上下文相关的区域特征。Global Transformer旨在学习场景级别的上下文感知表示。

为了进一步捕获多尺度表示之间的依赖关系,我们提出了“Local-Global Transformer”,以将局部特征与高分辨率的全局特征集成在一起。此外,我们引入了一个有效的坐标优化模块,以将向下采样的点移动到更靠近对象质心的位置,从而改善了对象proposal的生成。

在这里插入图片描述

Local Transformer

在这里插入图片描述

主要贡献:

在这里插入图片描述

实验结果

我们将Pointformer用作最新目标检测模型的基础,并在室内和室外数据集上展示了优于原始模型的重大改进。

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

Transformer交流群

已建立CVer-Transformer微信交流群!想要进Transformer学习交流群的同学,可以直接加微信号:CVer5555。加的时候备注一下:Transformer+学校+昵称,即可。然后就可以拉你进群了。

3D目标检测交流群

建了CVer-目标检测交流群!想要进检测学习交流群的同学,可以直接加微信号:CVer5555。加的时候备注一下:3D目标检测+学校+昵称,即可。然后就可以拉你进群了。

强烈推荐大家关注CVer知乎账号和CVer微信公众号,可以快速了解到最新优质的CV论文。

在这里插入图片描述

转载地址:http://kkwsz.baihongyu.com/

你可能感兴趣的文章
NN&DL4.3 Getting your matrix dimensions right
查看>>
NN&DL4.7 Parameters vs Hyperparameters
查看>>
NN&DL4.8 What does this have to do with the brain?
查看>>
nnU-Net 终极指南
查看>>
No 'Access-Control-Allow-Origin' header is present on the requested resource.
查看>>
No 'Access-Control-Allow-Origin' header is present on the requested resource.
查看>>
NO 157 去掉禅道访问地址中的zentao
查看>>
no available service ‘default‘ found, please make sure registry config corre seata
查看>>
No compiler is provided in this environment. Perhaps you are running on a JRE rather than a JDK?
查看>>
no connection could be made because the target machine actively refused it.问题解决
查看>>
No Datastore Session bound to thread, and configuration does not allow creation of non-transactional
查看>>
No fallbackFactory instance of type class com.ruoyi---SpringCloud Alibaba_若依微服务框架改造---工作笔记005
查看>>
No Feign Client for loadBalancing defined. Did you forget to include spring-cloud-starter-loadbalanc
查看>>
No mapping found for HTTP request with URI [/...] in DispatcherServlet with name ...的解决方法
查看>>
No mapping found for HTTP request with URI [/logout.do] in DispatcherServlet with name 'springmvc'
查看>>
No module named 'crispy_forms'等使用pycharm开发
查看>>
No module named 'pandads'
查看>>
No module named cv2
查看>>
No module named tensorboard.main在安装tensorboardX的时候遇到的问题
查看>>
No module named ‘MySQLdb‘错误解决No module named ‘MySQLdb‘错误解决
查看>>