SOLO: A Simple Framework for Instance Segmentation理解速递

SOLOarXiv上有两篇，SOLOv1和SOLOv2，近期看到TPAMI官网接受了SOLO，是前面两个版本的集合版。

SOLO: A Simple Framework for Instance Segmentation

阿德莱德大学和字节跳动实验室的。

一、相关背景

1.图像分割：

1）语义分割

按照语义，为图像中的每个像素分配标签。

2）实例分割

不分割背景，需要标注出图上同一实例类别的不同个体，比如人1，人2。

3）全景分割

语义分割和实例分割的结合，即要对所有目标和背景都检测出来，又要区分出同个类别中的不同实例。对背景做语义分割，对前景做实例分割。

二、相关工作

• 自顶向下top-down：“先检测，后分割”，首先检测边界框，然后在每个bbox中分割实例掩码。例如Fast R-CNN等。
• 自底向上bottom-up：首先为每个像素分配一个嵌入向量，然后将属于不同实例的像素推远，把属于同一个实例的拉近，从而将像素聚类到单个实例中，之后需要分组后处理来分