基于雙向稀疏Transformer的多變量時序分類模型
小型微型計(jì)算機(jī)系統(tǒng)
頁數(shù): 7 2023-02-07
摘要: 針對多變量時序(Multivariate Time Series, MTS)分類中長序列數(shù)據(jù)難以捕捉時序特征的問題,提出一種基于雙向稀疏Transformer的時序分類模型BST(Bidirectional Sparse Transformer),提高了MTS分類任務(wù)的準(zhǔn)確度.BST模型使用Transformer框架,構(gòu)建了一種基于活躍度得分的雙向稀疏注意力機(jī)制.基于KL散度構(gòu)...