首页 | 本学科首页   官方微博 | 高级检索  
     

基于Transformer的高分辨率桥梁裂缝图像级联分割方法
作者姓名:褚鸿鹄  袁华青  龙砺芝  邓露
作者单位:1.湖南大学土木工程学院;2.伦敦大学学院巴特莱特建筑环境学院;3.工程结构损伤诊断湖南省重点实验室
基金项目:国家自然科学基金项目 52278177;湖南省科技创新领军人才项目 2021RC4025;湖南省研究生科研创新项目 QL20210106;国家留学基金项目 202206130068 ~~;
摘    要:为充分发挥Transformer模型在高分辨率桥梁裂缝图像分割上的优势,提出了一种基于Transformer和坐标注意力(Coordinate Attention, CA)机制的精细化级联分割方法(级联CATransUNet)。首先,开发了一个基于TransUNet的裂缝特征提取模块,用于从低分辨率裂缝图像中初步提取3个尺度的粗粒度裂缝特征;其中,CA机制被引入TransUNet的跳跃连接结构,从而增强TransUNet网络对微小裂缝特征的表征。然后,基于所提取的三尺度粗粒度裂缝特征设计了2个基于物理级联结构的精细化运算模块,实现了从全局和局部2个维度依次恢复裂缝主体与边缘区域的细粒度像素特征。此外,为了充分利用多尺度特征在裂缝边界的细粒度特征表征中的优势,在训练过程中引入了一个带有主动边界回归项的多尺度级联损失。在基于无人机所采集的桥梁高分辨率裂缝图像上开展的消融性试验证明了所提出各组件的有效性。最后,在4 K分辨率的桥梁裂缝图像上开展了对比试验,结果表明:级联CATransUNet在不增加显卡内存需求的前提下,相较于此前最先进的基于传统卷积神经网络(Convolutional Neural Network, CNN)搭建的高分辨率图像精细化网络Segfix和CascadePSP,平均交并比(mean Intersection over Union, mIoU)和平均边缘精度(mean Boundary Accuracy, mBA)分别提升了5%和7%以上。采用级联CATransUNet可实现对高分辨率裂缝图像的精细化分割,为检测人员提供更加全面、准确的结构裂缝信息,从而为结构安全状况评估以及维护决策制定提供技术支撑。

关 键 词:桥梁工程  裂缝分割  Transformer  高分辨率图像  注意力机制  级联运算  
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号