(ChinaZ.com)9月15日 消息:UMMAFormer是一種新工具,專門用于識別視頻中的假內(nèi)容。這個工具在對抗虛假內(nèi)容,特別是視頻內(nèi)容的偽造上,展現(xiàn)出了更高的效率和準確度。與以往的方法相比,UMMAFormer在識別視頻偽造部分的表現(xiàn)更為出色。它的出現(xiàn)將對打擊虛假信息產(chǎn)生重大影響。
論文地址:https://arxiv.org/pdf/2308.14395v1.pdf
該方法引入了時序特征異常注意力(TFAA)模塊,通過時序特征重構(gòu)來增強對時序差異的檢測。還設計了并行交叉注意力特征金字塔網(wǎng)絡(PCA-FPN),以優(yōu)化特征金字塔網(wǎng)絡用于細微特征增強。
作者還提出了一個針對視頻修復場景的時間視頻修復定位(TVIL)數(shù)據(jù)集。實驗結(jié)果表明,該方法在多個基準數(shù)據(jù)集上取得了 state-of-the-art 的性能,明顯優(yōu)于之前的方法。
核心功能:
1. 提出時序特征異常注意力(TFAA)模塊增強對篡改的檢測
2. 設計并行交叉注意力特征金字塔網(wǎng)絡(PCA-FPN)進行特征增強
3. 在視頻修復場景提出新的TVIL數(shù)據(jù)集
4. 在多個數(shù)據(jù)集上優(yōu)于已有方法