目的图像超分辨重建是计算机视觉领域中的一个典型低层视觉任务,能够为目标检测、图像分割等高层任务提供更清晰更结构化的输入。基于CNN的图像超分辨率模型注重恢复图像的纹理和边缘信息,而基于Transformer的方法能建模全局上下文信息,但是存在注意力权重冗余问题。针对这两种模型的优缺点,本文设计了一种轻量级图像超分辨率网络。方法首先改进了传统的Transformer,提出了一种稀疏置换自注意力机制,在扩大窗口的同时解决冗余问题。在此基础上,我们基于CNN构建高频信息增强模块加强模型对局部细节信息的重建。在得到两种结构提取的特征后,我们提出一种双分支特征融合模块对全局特征和局部特征进行高效融合。结果本文方法在5个公开数据集上与11种先进超分辨方法进行了对比实验。结果表明,在保证模型轻量化的前提下,稀疏置换自注意力网络(Sparse and Permuted Self-Attention Network,SPSANet)在不同放大倍率和数据集上均取得最优或次优性能。当放大倍率为3时,在Urban100和Manga109数据集上的峰值信噪比(peak signal-to-noise ratio,PSNR)分别较最新的SOTA(state of the art)方法提升了0.15dB和0.25dB。主观视觉效果显示,SPSANet在复杂纹理和细节丰富的场景中重建的图像更加清晰、自然。结论本文提出的轻量级稀疏置换自注意力图像超分辨率网络能够在保持较低参数量与计算复杂度的同时,在多个数据集上取得优异的重建效果,展现出良好的泛化性与应用价值。
目的腹腔出血病情凶险,快速准确诊断至关重要。本文旨在解决超声图像出血分割中存在的低对比度、强噪声和边界模糊等挑战。方法本文提出了一种基于空间域和频域结合的双域多尺度注意力U型网络(Dual-domain and Multi-scale Attention Unet,DMA-UNet)用于超声图像腹腔出血区域分割。其核心架构包含三个关键创新:编码器的空洞注意力卷积模块集成并行卷积注意力机制与空洞卷积,在保证效率的同时增强小目标特征捕获;中间层的快速傅里叶卷积残差块通过频域变换有效建模全局上下文;跳跃连接的联合注意力结构实现跨层级特征优化。三者协同构成双域结合的多尺度注意力分析框架。结果实验基于源自两个中心363张腹腔出血超声图像,通过数据增强对模型进行训练、验证与测试。结果表明,本文提出的模型Dice和IoU指标在两个中心的测试集中分别达到了0.8797、0.7961和0.9339、0.8762,消融实验验证了所设计模块对模型性能提升的有效性,同时与主流的分割模型相比分割性能也具有显著的提升。结论本文提出了一种双域多尺度注意力分析网络,通过在多个核心模块中引入注意力机制,有效融合了空间域和频域特征,显著增强了DMA-UNet全局上下文建模能力、信息融合效率和模型的泛化性能,为腹腔出血区域分割网络的设计提供了新思路,具有较大的临床应用价值。