【应用方向】
罗竹是广东罗定竹蒸笼产业的核心原材料,年产量达7500万个,占全国市场80%以上。竹材富含营养且亲水性强,采后加工和储存中极易霉变,不仅导致变色、发臭、力学性能下降,更可能产生毒素威胁消费者健康。霉变早期(12–24小时)竹材表面无肉眼可见变化,传统目视检查完全失效。本研究提出基于遮挡敏感性(Occlusion Sensitivity, OS)分析的“协同设计”框架:先诊断优化深度学习模型结构,再筛选出7个关键特征波长(全谱244个波段,缩减97%)。轻量化检测模型验证准确率达90.74%,参数量从11.95 M降至0.065 M(缩减99.5%),推理速度达256.61 FPS。该技术可推广至竹木制品产线在线检测、古建筑木构件保护等无损实时监测场景。
关键词:高光谱成像、竹材霉变检测、遮挡敏感性、波段筛选、模型轻量化
【研究背景】
高光谱成像结合深度学习为竹材霉变早期检测提供了新途径,但面临三重瓶颈:高光谱数据维度高(244个波段),有限样本下易引发“休斯现象”;深度学习模型是“黑箱”,无法判断决策依据是光谱信息还是空间纹理;现有特征波长选择方法(CARS、SPA、PCA载荷)基于数据统计特性或线性投影,与深度神经网络的非线性学习机制不一致,且筛选与训练独立进行,导致关键特征可能被错误剔除。
针对上述问题,仲恺农业工程学院研究团队采用GaiaSky mini高光谱成像系统,提出基于OS的“协同设计”框架,将OS从被动诊断工具转化为主动优化引擎,统一了模型结构优化与特征波长选择。
【实验与数据采集】
样本准备:实验用罗竹采自广东罗定。经传统竹蒸笼加工工艺处理后裁切为270块50 mm × 60 mm试样。其中135块接种**悬液,135块作为对照。在25°C、90%–100% RH条件下培养,于接种后12、24、36、48、72小时采集高光谱图像——覆盖“肉眼不可见→稀疏菌丝→密集产孢”的完整霉变进程。
高光谱数据采集:采用GaiaSky mini高光谱成像仪,光谱范围386.7–1016.7 nm,284个连续波段。数据经去噪、ROI裁剪、子图划分、边缘噪声波段剔除后,最终数据集包含1620个高光谱图像立方体。

图1 竹材试样72小时霉变视觉进程图

【研究结果】
1. 基线模型建立与OS诊断
研究首先建立全谱数据分类基线。传统机器学习模型验证准确率为84.57%–87.35%,深度学习模型为86.11%–91.67%。仅看准确率,各模型似乎“都能用”——但部分模型存在明显过拟合,准确率本身无法回答:模型到底依据什么做判断?
为此引入遮挡敏感性(OS)分析。OS通过在图像上逐区域遮蔽像素并监测分类概率下降幅度,生成“敏感度图”——亮度越高的区域对决策越关键。
【关键发现①】 ResNet-18和AlexNet的敏感度图呈现高度集中的注意力峰,仅遮蔽1%像素,预测概率即从接近100%崩溃至约10%。证明这两类模型依赖的是局部空间纹理(如竹材表面纹路),而非光谱信号——相当于把高光谱图像当作普通照片处理。
【关键发现②】 PreAct-ResNet在80%像素被遮蔽时仍保持92.62%的预测概率,证明其对光谱信息的提取更为深入,但复杂架构在小样本下极易过拟合(训练集100%,验证集仅86.11%)。
【关键发现③】 上述诊断指明优化方向:模型架构必须强制“优先看光谱”,而非“偷看纹理” 。

图3 各深度学习结构敏感度图与遮蔽分析
表1 不同遮蔽水平下各模型分类正确概率
|
模型 |
原始(%) |
1%遮蔽(%) |
10%遮蔽(%) |
40%遮蔽(%) |
80%遮蔽(%) |
|
ResNet-18 |
98.29 |
10.35 |
0 |
0 |
0 |
|
AlexNet |
100 |
100 |
100 |
5.54 |
0 |
|
PreAct-ResNet |
99.87 |
100 |
100 |
100 |
92.62 |
|
ResNet-HS |
99.81 |
99.80 |
99.78 |
99.09 |
90.32 |
2. OS引导的模型架构优化——ResNet-HS
基于OS诊断结果,团队对ResNet-18进行了针对性重构:(1)移除深层残差结构,仅保留初始卷积层和残差块;(2)将初始7×7卷积核改为1×1、核数从64减至32——从架构层面强制模型优先处理逐像素的光谱数据而非局部空间纹理,这是对OS诊断发现核心缺陷的直接修复。
经数据增强后,ResNet-HS验证准确率从原始ResNet-18的87.04%提升至95.06%;即便80%像素被遮蔽,仍保持90.32%的预测概率——模型注意力已成功从空间纹理转向光谱本质。

图4 ResNet-HS网络结构图
3. OS引导的特征波长协同筛选
在拥有光谱鲁棒模型后,研究将OS从“诊断工具”升级为“筛选引擎”。具体方法:对每个样本的每个波段逐一“遮蔽”,测量预测概率下降幅度,即为该波段贡献值;在全数据集上累积计算累积贡献值(CCV)。CCV越高的波段,对模型决策越关键。
最终筛选出7个特征波长:414.1、434.7、467.1、792.8、905.9、937.2、968.8 nm。


图5 OS引导的CCV分布及所选特征波长
4. 模型性能对比
OS-ResNet-HS用仅7个波段达到90.74%验证准确率,与PCA载荷法(12波段,91.36%)性能相当但变量减少42%,显著优于CARS-SPA法(14波段,87.65%)。对12h早期感染样本(无可视霉变)识别精度达81.7%,24h样本AUC达0.980,36h及以后精度均超98%。
表2 基于特征波长的ResNet-HS模型识别结果
|
波长筛选方法 |
变量数 |
校正集准确率(%) |
交叉验证集准确率(%) |
验证集准确率(%) |
|
全谱 |
244 |
97.53 |
95.56±0.0155 |
95.06 |
|
CARS-SPA |
14 |
91.82 |
86.60±0.0116 |
87.65 |
|
PCA载荷 |
12 |
95.37 |
91.67±0.0159 |
91.36 |
|
OS引导 |
7 |
95.45 |
90.49±0.0040 |
90.74 |
5. 模型效率
OS引导的协同设计使参数量从11.95 M降至0.065 M(缩减99.5%),推理速度达256.61 FPS,光谱数据缩减97%,同时保持90.74%的高检测准确率。这一效率指标意味着该模型可在嵌入式、低功耗硬件上实时运行,为竹材加工产线的在线检测提供了工程可行性。
表3位置:不同模型计算效率与性能对比
|
模型 |
参数量(M) |
FLOPs(G) |
推理速度(FPS) |
验证集准确率(%) |
|
ResNet-18 |
11.95 |
2.0745 |
128.62 |
87.04 |
|
ResNet-HS |
0.0645 |
0.2521 |
215.19 |
95.06 |
|
OS-ResNet-HS |
0.0569 |
0.1620 |
256.61 |
90.74 |
【结论】
本研究证实,遮挡敏感性分析(OS)能够从被动的诊断工具转化为主动的优化引擎,所提出的“协同设计”框架成功实现了模型结构优化与特征波长选择的统一。关键发现与贡献如下:
OS诊断揭示根本问题:标准深度模型(ResNet-18、AlexNet)对空间纹理特征的过度依赖导致其性能脆弱,这是仅凭准确率指标无法察觉的“隐性缺陷”。
OS引导架构优化:基于诊断结果开展针对性修复,采用1×1卷积与浅层结构设计,使验证准确率由87.04%提升至95.06%,同时参数量缩减99.5%,降至0.065M。
OS引导特征波长协同筛选:从模型决策贡献出发,仅需7个波段即可达到90.74%的准确率,优于CARS-SPA方法(14波段,87.65%),并与PCA载荷法性能相当(12波段,91.36%),但变量数量减少42%。
工程价值:模型推理速度达256.61 FPS,参数量仅0.065 M,具备嵌入式实时部署条件。该“协同设计”方法论不仅服务于竹蒸笼产业的品质保障,也为高光谱检测系统的嵌入式硬件开发提供了可行路径。
【来源】
Lin Z, Ma Z, Chu X, Fu H, Wei H, Liu H. A hyperspectral co-design framework guided by occlusion sensitivity for early mould detection in bamboo. Spectrochimica Acta Part A: Molecular and Biomolecular Spectroscopy, 2026, 127546.
地址:无锡市梁溪区南湖大道飞宏路58-1-108
电话:13810664973
邮箱:info@dualix.com.cn
地址:北京市海淀区中关村大街19号
电话:13810664973
邮箱:info@dualix.com.cn
地址:陕西省西安市高新区科技一路40号盛方科技园B座三层东区
电话:13810664973
邮箱:info@dualix.com.cn
地址:成都市青羊区顺城大街206号四川国际大厦七楼G座
电话:13810664973
邮箱:info@dualix.com.cn
地址:深圳市龙华区民治梅龙路
电话:13810664973
邮箱:info@dualix.com.cn