Title
Fork me on GitHub

opennmmlab实战营二期-mmsegmentation理论课(八)

opennmmlab实战营二期-mmsegmentation理论课(八)

视频链接

前言

  • mmsegmentation算法库的介绍
    比如特点、模型库、数据集、应用场景(医疗、遥感、生活、工业)

  • 什么是语义分割
    将图像按照物体的类别分割成不同的区域==对每个像素进行分类
    应用:无人驾驶汽车、人像分割(抠图)、卫星遥感、医疗影像分析(x光、ct片分割病灶区域)

  • 语义分割vs实例分割vs全景分割
    image

语义分割的基本思路

  • 按颜色分割,但存在一些问题:
    image
  • 逐像素分类:
    image

深度学习下的语义分割模型

全卷积网络

image
升采样:
image
双线性插值:
image
使用卷积实现双线性插值:
image
转置卷积:
image
image
全卷积网络的预测与训练:
image
基于多层级特征的上采样:
image
image
unet:
image

上下文信息与PSPNet模型

图像周围的内容(也称上下文)可以帮助做出更准确得到判断。
image
PSPNet:
image

空洞卷积和DeepLab模型

DeepLab系列:
image
空洞卷积:
image
image
image
DeepLab模型:
image
条件随机场CRF:
image
image
空间金字塔池化ASPP:
image
DeepLab v3+:
image
image

语义分割算法总结

image

语义分割前沿算法

SegFormer、K-Net、MaskFormer、Mask2Former、Segment Anything(SAM)、

分割模型的评估

取交集或并集:
image
image

实践mmseg

预知如何实现,请见下回分解!

posted @ 2023-06-12 18:36  新西兰蟹老板  阅读(98)  评论(0编辑  收藏  举报