图像分类
Classification
类别概率分布 Top-5
Top-1: --
使用同一张图像对比图像分类、目标检测、语义分割和实例分割的预测粒度、输出结构与评价指标,并引导进入独立任务模块。
Classification
Object Detection
Semantic Segmentation
Instance Segmentation
四任务在预测单位、输出格式、评价指标与代表方法上的差异
1 × C class probability
Top-1 / Top-5 Accuracy
BoVW, CNN, ResNet
N × [x1,y1,x2,y2,score,class]
mAP / IoU
YOLO, Faster R-CNN, DETR
H × W class map
mIoU / Pixel Acc
FCN, U-Net, DeepLab
N masks + bbox + class + id
Mask AP
Mask R-CNN, YOLACT, SOLO
从图像级预测逐步走向实例级理解
整张图像一个类别分布
p(y | image) ∈ RC每个目标一个边界框
N × [x1,y1,x2,y2,score,class]每个像素一个语义类别
H × W class map每个实例一张 mask 和 ID
N × {bbox,class,score,mask,instance_id}四任务对比用于建立谱系;下方入口进入拆分后的独立实验模块。
K-means、Graph Cut、Watershed、GrabCut、Label Map
进入图像分割与区域提取IoU、NMS、YOLO、R-CNN、RPN / Anchor
进入目标检测FCN、1×1 Conv、Upsampling、Skip Connection、mIoU、SegFormer
进入语义分割Mask R-CNN、FPN、ROI Align、Mask Head、YOLO-seg
进入实例分割