在3D点云目标检测领域，对于数据输入的处理一般有三种：
多视角。将三维点云投射到多个二维平面形成图像
体素，voxel，将三维点云切割成多个小块，这些小块就叫体素，类似像素。这是最自然的一种想法，正如像素通过规律排列形成二维图像，体素也是通过规律排列形成三维体的，并且可以使用3D卷积像图像一样进行操作。 现在的VoxelNet不还是回归到体素了吗？只不过VoxelNet不是直接对体素进行卷积，后面详细介绍。
直接输入点云数据（N，D），N是点云文件中点的数量，一般在万级，D则是特征维度，一般是x,y,z加一个强度，也就是4维。
原生的点云数据有两大特点：
PointNet的思路就是利用上述两个特点。
置换不变性
事实上有很多函数是不考虑输入集顺序的，比如求最大值和均值，PointNet采用了MaxPooling，即求每个维度的最大值。比如N×D最终输出一个D维数组作为特征代表，D太小，会损失很多信息，所以作者现将输入映射到N×1024，然后输出1024维的特征，这样可以保留更多信息。
旋转不变形
所谓旋转，就是乘以一个D×D的矩阵，作者采用了一个很巧妙的方式，训练一个这样的网络，让点云输入主网络之前自己调整到最好的姿态。
PointNet有分类和分割两种网络，分类网络基本思想如下：
输入N个3维点，也就是点云
经过Tnet旋转到合适的角度，利用旋转不变性
经过一系列的卷积转换为N×1024维
Maxpooling，输出1024维的向量，利用置换不变性
经过全连接，输出k维向量，显然k就是分类数
分割是在分类的基础上做些演绎，最终输出N×M的矩阵，M代表分类，也就是说给每个点都进行了分类。
VoxelNet关注的更多是点云的稀疏性和密度不均衡性，虽然作为声称直接输入点云数据，但是看起来还是将点云进行了规范化，即投射到3D空间。
该算法发布于PointNet面世后两月，作者称赞了PointNet取得的成绩，然后反手就是一句我才是“state of the art”。具体来说，作者认为PointNet有两个问题：
能够容纳的点云数量太少（约1k，Nuscenes 32线 ~43k，Kitti 64线 ~153k）
没有目标检测功能（只有分类和分割）。
所以作者的主要目的就是要让自己的网络能够容纳更大规模的输入以及能够实现目标检测（带航向角的3D框，7个自由度）
VoxelNet网络整体分为三部分：
Feature learning network：全连接和最大池化，局部特征提取
Convolutional middle layers：3D卷积，并在最后将张量压缩一个维度
Region proposal network：2D卷积，输出目标map
这个阶段比较简单，对128 × 10 × 400 × 352的张量做3次3D卷积，聚合各个voxel的特征（可以看到，从最开始的point-wise、voxel-wise再到现在聚合voxels特征，该网络对特征的提取层层递进，很是精妙啊！）。
这3次卷积之后输出的张量是64 × 2 × 400 × 352，接着压缩一个维度，最终输出3D的张量：128 × 400 × 352，事实上从这个张量的形状可以看到，这就相当于是提取了俯视图的特征，然而和图片不同的是：图片是直接降维，在Z方向把3D点云拍扁，而作者这样做对每个“俯视图”中的点都保留了128维的信息！
RPN层，作者说参考的是Faster-RCNN，不过看起来更像是YOLO，因为这里输出的直接就是最后的预测结果了，而不是推荐区域。
上一层输出了3D张量，在本阶段就可以使用2D卷积了，基本上就是图像卷积里的老套路了，卷积、上采样、降采样、skip-connect等等。图中表达的很清楚，值得注意的是这个阶段缩小尺寸也是通过stride=2实现的，感觉现在的网络更加倾向于全连接，池化用的越来越少。
最重要的是输出，这层的输出就是最终结果了。作者设计了两个分支，一边分类，一边回归（毫无新意啊！）。
分类方面，输出2个维度，对应两个anchor，或者说每个网格预测两个结果。
回归方面，输出14个维度，也是对应两个anchor，而每组结果对应的是7个自由度。
顺便提一下损失函数，分类交叉熵损失，回归L1-smooth（毫无新意+1）
按照作者描述，CenterPoint就是将VoxelNet的RPN层换成了CenterNet。（我真是醉了，这都能水论文）
从两个方面简单说一下两者区别：
