建筑外立面多类缺陷自动巡检系统:无人机采集+AI分割+自动报告,剥落检测Recall达98%
导读建筑外立面缺陷检测面临一个棘手的多尺度难题细小裂缝仅占几个像素而大面积剥落可能覆盖整面墙——两者的像素比例差异达到数量级水平。现有方法要么只能检测单一缺陷类型要么局限于特定立面材料。NTU南洋理工大学的Zhou和Tiong提出了一套从无人机采集到自动生成检测报告的完整系统核心AI模型基于EfficientUNet架构U-Net EfficientNet-B5骨干通过可调batch size和主动学习率策略解决多尺度特征学习问题。在391张真实无人机采集图像的实飞验证中剥落检测Recall达98.00%玻璃破损Recall达90.80%覆盖混凝土、瓷砖、砖石、玻璃四类立面材料。论文信息标题Defects inspection system for building facades using drones and deep learning method作者Xiaoling Zhou, Robert Lee Kong Tiong机构南洋理工大学土木与环境工程学院、中新国际联合研究院广州发表Expert Systems with Applications, Volume 298, Part B, 2026一、建筑外立面检测的两个核心挑战建筑外立面长期暴露于环境中常见缺陷包括剥落spalling、渗水water seepage、裂缝crack和玻璃破损glass breakage覆盖混凝土、瓷砖、灰泥、砖石、玻璃等多种材料。传统人工巡检耗时、依赖经验、且高层建筑存在安全风险。将深度学习引入自动检测时面临两个关键挑战第一跨材料泛化能力不足。论文引用的研究表明在一种材料上训练的裂缝检测模型如混凝土迁移到其他材料如瓷砖时性能显著下降。现有工作大多集中在单一立面类型上。第二多类缺陷的像素分布极度不均衡。如Onal和Edis的研究所示单独检测裂缝可达94-98%的精度但同时检测两种以上缺陷时精度骤降至40-70%。根本原因在于不同缺陷的像素占比差异巨大——裂缝是细线条结构玻璃破损则是大面积密集网络两者对模型的特征学习要求截然不同。二、EfficientUNet用编解码器架构应对多尺度缺陷架构设计模型采用EfficientUNet架构由三部分组成编码器EfficientNet-B5骨干网络通过复合缩放compound scaling同时优化网络深度、宽度和分辨率在参数量和性能之间取得平衡。其深度可分离卷积有效提取细粒度特征如细裂缝和小剥落区域。解码器U-Net结构包含嵌套的密集卷积块和重新设计的跳跃连接。相比标准U-NetU-Net的密集连接和增强跳跃连接更好地保留了高层语义信息和低层空间细节减少编解码器之间的语义鸿沟。损失函数Dice Loss直接优化预测区域和真实区域的重叠度天然适合处理类别不平衡问题——少数类如裂缝不会被多数类如无缺陷背景淹没。图片来源于原论文训练策略可调batch size 主动学习率这是论文解决多尺度问题的核心策略小batch size1-2训练初期使用让模型聚焦于学习细粒度特征如细裂缝的线条结构大batch size6-8训练25个epoch后切换从更广泛的特征范围中学习促进全局收敛主动学习率配合Adam优化器初始值0.001采用阶梯衰减策略step decay在指定间隔动态降低学习率这种先精后广的训练节奏使模型既能捕捉裂缝这类细线条结构又能识别大面积剥落和渗水区域。数据集训练集674张验证集497张含剥落140张、渗水105张、裂缝169张、玻璃破损12张图像来源包括网络公开数据、手机拍摄和无人机采集覆盖混凝土、瓷砖、灰泥、玻璃、砖石等多种立面材料。所有图像由同一团队工程师通过LabelMe工具进行像素级标注。三、实验结果可调batch size如何解决裂缝检测的消失问题不同训练策略对比验证集497张缺陷类型小batch size Recall/Precision大batch size Recall/Precision可调batch size Recall/Precision剥落0.8233 / 0.51390.8731 / 0.81260.8648 / 0.7265渗水0.8268 / 0.63270.8640 / 0.67970.8923 / 0.6273裂缝0.7134 / 0.40360 / 00.7430 / 0.4439玻璃破损0.9672 / 0.78740.9953 / 0.91720.9960 / 0.8478无缺陷0.9768 / 0.96360.9812 / 0.98320.9719 / 0.9828关键发现大batch size训练导致裂缝检测完全失效Recall和Precision均为0。原因是大batch size倾向于学习宏观特征而裂缝作为细线条结构在大batch下被其他类别主导的梯度淹没。小batch size虽能检测裂缝Recall 0.7134但在剥落和玻璃破损上精度不足。可调batch size策略结合了两者优势裂缝Recall恢复至0.7430同时玻璃破损Recall达到0.9960。不同骨干网络对比验证集497张缺陷类型ResNet-UNet R/PVGG-UNet R/PEfficientUNet R/P剥落0.7860 / 0.47990.7699 / 0.43230.8648 / 0.7265渗水0.8821 / 0.25180.8077 / 0.74860.8923 / 0.6273裂缝0.6782 / 0.30170.5888 / 0.80210.7430 / 0.4439玻璃破损0.9377 / 0.86620.9594 / 0.61480.9960 / 0.8478无缺陷0.9361 / 0.95920.9558 / 0.95060.9719 / 0.9828EfficientUNet在所有缺陷类型上均优于ResNet-UNet和VGG-UNet。以裂缝为例EfficientUNet的Recall为0.7430比ResNet-UNet的0.6782高出0.0648比VGG-UNet的0.5888高出0.1542。样本外测试集320张模型训练完成后用手机采集缺陷类型ResNet-UNet R/PVGG-UNet R/PEfficientUNet R/P剥落0.7354 / 0.31090.7312 / 0.32350.8014 / 0.7279渗水0.7717 / 0.23700.6734 / 0.77410.7676 / 0.6427裂缝0.6494 / 0.28110.4926 / 0.72340.7442 / 0.3715玻璃破损0.9698 / 0.81840.9771 / 0.60560.9972 / 0.8511无缺陷0.9163 / 0.96450.9544 / 0.95390.9802 / 0.9773样本外数据集的结果与验证集趋势一致表明模型具备跨数据集的泛化能力。EfficientUNet在剥落检测上的优势尤为明显Recall 0.8014Precision 0.7279而ResNet-UNet的Precision仅0.3109。四、无人机实飞验证391张真实场景图像的检测表现论文在AI模型定型后对玻璃、混凝土和瓷砖三类立面的多栋高层建筑进行了无人机实飞验证共采集391张图像。由于这些图像未进行像素级标注评估采用图像级统计TP/FP/FN人工核验。缺陷类型TPFPFNRecallPrecision剥落9836298.00%73.13%渗水136211987.74%86.62%裂缝152144477.55%91.57%玻璃破损7942890.80%65.29%剥落检测Recall最高98.00%仅2张漏检。裂缝Precision最高91.57%误报极少但Recall偏低77.55%44张漏检主要来自远距离或大角度拍摄的细裂缝。玻璃破损Recall较高90.80%但Precision偏低65.29%42张误报主要来自粗糙表面纹理和玻璃幕墙上的复杂背景图案。图片来源于原论文论文对误检原因进行了详细分析剥落误报空调外机、阴影、周围植物被误分类为剥落裂缝漏检远距离和大角度拍摄的细裂缝容易被遗漏渗水误报玻璃幕墙上的阴影和结构线被误分类为渗水或裂缝玻璃破损误报粗糙表面纹理被错误识别为玻璃破损五、总结与思考本文构建了一套从无人机采集、AI像素级分割到自动报告生成的完整建筑外立面缺陷检测系统。核心AI模型EfficientUNet通过可调batch size策略解决了多尺度缺陷的像素不平衡问题——特别是避免了大batch size训练下裂缝检测完全失效的现象。在391张真实无人机图像的实飞验证中四类缺陷均达到较高的检测Recall77.55%-98.00%覆盖混凝土、瓷砖、砖石、玻璃等多种立面材料。完整的端到端系统设计具有工程参考价值从无人机飞行规范距立面≤10m、尽量平行拍摄到在线API平台、再到自动Word报告生成形成了可直接部署的闭环方案。可调batch size的训练策略简单有效先小后大的节奏让模型兼顾细粒度裂缝和大面积剥落无需复杂的多尺度架构设计对其他存在多尺度不平衡问题的检测任务有直接参考意义。