news 2026/8/12 23:34:59

DAY54 CBAM注意力

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
DAY54 CBAM注意力

1. 通道注意力模块(Channel Attention Module)复习

通道注意力解决的是“看什么” (What) 的问题,即在众多的特征通道中,哪些通道包含更有用的信息。

  • 核心逻辑

    • 双重池化:同时使用全局平均池化 (AvgPool)全局最大池化 (MaxPool)。平均池化保留全局背景,最大池化捕捉最显著的特征(如强边缘、高亮处)。

    • 共享 MLP:将池化后的向量送入一个共享的全连接层(通常包含降维和升维,以减少参数量),学习通道间的依赖关系。

    • 权重生成:将两个池化的结果相加,通过Sigmoid激活函数生成 0 到 1 之间的权重,最后乘回原始特征图,实现对重要通道的加强和无效通道的抑制。

2. 空间注意力模块(Spatial Attention Module)

空间注意力解决的是“在哪里” (Where) 的问题,即在图像的特征图中,哪些位置(像素点)是关键区域。

  • 核心逻辑

    • 维度压缩:沿着通道轴进行平均池化和最大池化,把 C 个通道压缩成 2 个通道(一张均值图和一张最大值图)。

    • 特征融合:将这两张图拼接(Concat),然后使用一个较大的卷积核(如)进行卷积。大卷积核能提供更大的感受野,帮助模型理解物体的位置关系。

    • 权重生成:卷积输出经过Sigmoid得到空间权重图,覆盖在特征图上,让模型“盯住”重点区域(如猫的头部),忽略背景区域。

3. CBAM 的定义(Convolutional Block Attention Module)

CBAM 是一种轻量级、即插即用的卷积神经网络注意力模块。

  • 定义:它将“通道注意力”和“空间注意力”组合在一起。通过串行的方式(先计算通道注意力,再在结果上计算空间注意力),对特征进行双重强化。

  • 三大特点

    1. 双重维度:比传统的 SE 模块(仅通道注意力)多了一个空间维度,提升了模型定位目标的能力。

    2. 即插即用:它可以直接插入到任何现有的卷积网络(如 ResNet, MobileNet, YOLO 等)的卷积层之间,无需改变原网络的主体结构。

    3. 高效性:它增加的参数量极少,但在图像分类、目标检测等任务中通常能带来明显的性能提升。

一句话总结:

CBAM 通过通道注意力告诉模型“什么特征重要”,再通过空间注意力告诉模型“哪里重要”,二者结合让特征表达更加精准。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/7/29 20:37:39

如何快速启动HY-MT1.5-7B翻译模型?vLLM部署全步骤解析

如何快速启动HY-MT1.5-7B翻译模型?vLLM部署全步骤解析 你是否正在寻找一个高效、精准且支持多语言互译的本地化翻译解决方案?腾讯混元团队推出的 HY-MT1.5-7B 翻译模型,正是为此而生。它不仅在多个国际评测中表现卓越,还针对混合…

作者头像 李华
网站建设 2026/8/9 10:26:10

如何构建带情感分析的语音识别系统?试试这款优化版SenseVoice镜像

如何构建带情感分析的语音识别系统?试试这款优化版SenseVoice镜像 在智能客服、会议记录、内容审核等实际场景中,单纯的语音转文字已经无法满足需求。我们更希望系统不仅能“听清”说了什么,还能“读懂”说话人的情绪和语境背景——比如是开…

作者头像 李华
网站建设 2026/7/28 16:29:33

关于spring的全量认识

这里聚焦一个问题,到底对spring产生怎么样的认识,才算有个稍微全面的认识。 本文章不适合初学者看。适合想集大成者看。 1.工程引入与配置层面: 什么版本的spring 2.代码层实际应用层面: spring提供了哪些机制。供我们使用 1.ioc …

作者头像 李华
网站建设 2026/7/28 13:31:27

B站视频内容提取神器:5秒读懂长视频的AI革命

B站视频内容提取神器:5秒读懂长视频的AI革命 【免费下载链接】BilibiliSummary A chrome extension helps you summary video on bilibili. 项目地址: https://gitcode.com/gh_mirrors/bi/BilibiliSummary 你是否曾经面对B站上几十分钟的教程视频&#xff0c…

作者头像 李华
网站建设 2026/8/9 22:57:31

OpCore-Simplify终极指南:一键实现专业级Hackintosh自动化配置

OpCore-Simplify终极指南:一键实现专业级Hackintosh自动化配置 【免费下载链接】OpCore-Simplify A tool designed to simplify the creation of OpenCore EFI 项目地址: https://gitcode.com/GitHub_Trending/op/OpCore-Simplify 对于想要体验macOS系统但面…

作者头像 李华
网站建设 2026/8/11 1:49:08

OpenCore智能助手:新手也能轻松搭建黑苹果系统

OpenCore智能助手:新手也能轻松搭建黑苹果系统 【免费下载链接】OpCore-Simplify A tool designed to simplify the creation of OpenCore EFI 项目地址: https://gitcode.com/GitHub_Trending/op/OpCore-Simplify OpenCore智能助手是一款革命性的黑苹果系统…

作者头像 李华