【7班】-OpenMMLab-实战营第二期-MMSeqmentation

Jourllker Jourllker 墨衍会员 · AI 创作全网分发 墨衍智能分发 通过墨衍一键同步至各平台 可同步平台 CSDN微信公众号微博知乎掘金百家号博客园抖音小红书 你的文章也可以这样分发 墨衍会员 ¥399起/年,写一次发全网 我也要 + 加入社区

目录:

目录

语义分割——MMSegmentation

图像分割的三种层次——

语义分割基本思路——

同种颜色的聚类——

 

卷积神经网络+滑窗——

解决重复计算:

解决——卷积取代全连接层:

语义分割评估指标——

 全卷积网络——

特点——卷积网络进行语义分割

双线性插值——

 转置卷积——

 上下文信息——

PSPNet——2016

DeepLab的创新——

空洞卷积——

条件随机场——CRF


语义分割——MMSegmentation

什么是——把图像中每个像素做分类。把像素按物体的类别分类。

无人驾驶、遥感、医疗...

 

应用举例:

 

 

进行语义分割之后,可以进行后续一系列处理:如骨干轮廓提取、关键点检测等。

图像分割的三种层次——

从低到高:语义分割、实例分割、全景分割。

 

语义分割基本思路——

同种颜色的聚类——

聚类:按颜色相近的色块进行聚类。

可以实现抠图,但是不能得到语义。

 

卷积神经网络+滑窗——

有缺点:重复计算严重。这个前面目标检测也有很多相关内容。

 

解决重复计算:

先对原图进行一次卷积,得到特征图。在特征图上滑窗或者全连接。(老方法了)

这样有另一个问题:全连接层的输入是固定,但是输入的图像是随即大小的,这样导致特征图大小也是随机的。

解决——卷积取代全连接层:

这样每个通道代表了一个类别的概率。

语义分割评估指标——

主要就是交并比。

 全卷积网络——

因为没有全连接层,只有卷积层,所以叫全卷积网络。

 

特点——卷积网络进行语义分割

和卷积进行对比:

最后输出的图片是某个类别(图中是猫)的概率的热力图,然后再做聚类。

 

问题:卷积神经网路使用上采样,从热力图还原到原图的感受野如何确定呢?

解决:上采样(升采样)。

双线性插值——

计算过程。

 

一次双线性插值就可以使用下图这样一个卷积核完成。

 转置卷积——

如果卷积核是可学习的,那么就成为了转置卷积:

注:转置卷积和卷积在形状上有互逆的关系,在结果上没有。

高层次特征语义丰富但是位置信息缺乏,导致还原到原图的时候区分糊成一片。

可以基于多层级特征进行上采样。

 上下文信息——

图像周围的内容(上下文)可以帮助进行更加准确的判断。

PSPNet——2016

通过不同尺度的池化来实现。

 

DeepLab的创新——

  • 空洞卷积
  • 条件随机场

空洞卷积——

膨胀卷积核,特征图不变。

简单对比普通下采样和空洞卷积:

利用空洞卷积取代下采样层,并逐步增加rate以维持特征图的大小基本不变。

条件随机场——CRF

模型输出的分割很模糊,可以结合原图的颜色信息对模型预测结合,得到精细化分割结果。

条件随机场通过能量函数实现:

总的思路就是鼓励在颜色变化处认为类别是不一样的。

 

 

 

...全文

相关推荐

【工业自动化】欧姆龙PLC产品线与编程软件体系详解:基于西门子工程师视角的选型指导与避坑指南

内容概要:本文详细解析了欧姆龙PLC的产品线、编程软件体系、通信架构及选型策略,重点从西门子工程师视角出发,对比两者的定位差异与技术路径。文章明确指出欧姆龙存在两套不兼容的系统:传统的C系列(CP/CJ/CS)使用CX-Programmer软件和绝对地址编程,适用于单机设备与老线改造;新型Sysmac平台(NJ/NX/NY)采用Sysmac Studio集成开发环境,支持IEC 61131-3标签变量、EtherCAT运动控制和多领域一体化控制,代表当前技术高地。同时梳理了FINS、CompoWay/F、EtherCAT、EtherNet/IP等多层通信协议的区别,并列出从西门子转型易踩的八大误区,提供清晰的选型决策路径。; 适合人群:具备一定工业自动化背景,熟悉西门子PLC体系,正在转向或需要维护欧姆龙系统的工程师,尤其是从事设备选型、系统集成与产线升级的研发和技术人员。; 使用场景及目标:①帮助西门子背景工程师快速建立对欧姆龙双平台的认知框架;②指导正确选用CP/CJ/NJ/NX系列及配套软件;③避免在通信接口、地址体系、软件版本等方面出现典型错误;④实现老旧系统向新平台平滑迁移。; 阅读建议:此资源强调“先框架后细节”,建议读者先掌握三大平台分流和软件对应关系,再深入具体型号参数。特别注意2026年10月新版Sysmac Studio与CX-One对CJ3M系列的双向支持这一关键更新,在实际项目中需严格核对控制器固件与软件版本匹配性,防止因版本不兼容导致无法连接。

莫问西东LJ

地级市到杭州北京深圳的球面距离.-最新出炉zip

一、资源特点 全新力作:今年精心打造,人工细细打磨,品质上乘。 权威精准:数据来源,准确靠谱,值得信赖。 品质无忧:绝无数据造假,品质有保障,放心使用。 二、适用人群 学生:在校专科生、本科生、研究生,助力学业各个环节。 教研人员:大学教师和学术科研工作者,为教学科研添力。 三、适用专业 社科经济:经济学、社会学专业适用。 规划管理:地理学、城市规划,以及商业、工商管理专业皆可使用。 [特别说明]相关资源数据已全部上传至网盘。 由于纯手工分享粘贴链接和提取码,不排除有极少提取码或者链接出现差错(或内容与标题对不上),若遇到这种情况,不要着急,请私信博主,将会第一时间更正补链接!

onnx

openeuler配置

openeuler系统环境配置管理

秋十七

产业园区运营负责人如何提升园区内科技成果引进与落地的匹配效率?.docx

科易网基于AI模型+行业大数据,在技术转移、成果转化、技术经纪、知识产权、产业创新、科技招商等垂直领域的多样化应用场景,推出科技创新领域的AI+工具与数智化解决方案,推动科技创新与产业创新智能化发展。

BIZKEEN

CISP-CSE注册云安全工程师备考资源包

CISP-CSE注册云安全工程师备考资源包

嫑甭歪孬
评论
收藏 已收藏
分享
返回顶部
Jourllker
OpenMMLab 536 成员 1,595 内容