基于注意力機制和微分跟蹤器的寬度學習系統(tǒng)
深圳大學學報(理工版)
頁數(shù): 11 2024-08-20
摘要: 寬度學習系統(tǒng)(broad learning system, BLS)具有模型結構簡單、訓練效率高、易于解釋等優(yōu)勢,但存在特征學習能力不足以及泛化性能不穩(wěn)定的缺點.為緩解此問題,提出一種基于自注意力機制和微分跟蹤器(tracking differentiator, TD)的寬度學習系統(tǒng),記為A-TD-BLS.在模型結構上,A-TD-BLS在原始BLS模型的基礎上引入了自注意力機制...