(ChinaZ.com)9月15日 消息:UMMAFormer是一種新工具,專門用于識別視頻中的假內(nèi)容。這個(gè)工具在對抗虛假內(nèi)容,特別是視頻內(nèi)容的偽造上,展現(xiàn)出了更高的效率和準(zhǔn)確度。與以往的方法相比,UMMAFormer在識別視頻偽造部分的表現(xiàn)更為出色。它的出現(xiàn)將對打擊虛假信息產(chǎn)生重大影響。
論文地址:https://arxiv.org/pdf/2308.14395v1.pdf
該方法引入了時(shí)序特征異常注意力(TFAA)模塊,通過時(shí)序特征重構(gòu)來增強(qiáng)對時(shí)序差異的檢測。還設(shè)計(jì)了并行交叉注意力特征金字塔網(wǎng)絡(luò)(PCA-FPN),以優(yōu)化特征金字塔網(wǎng)絡(luò)用于細(xì)微特征增強(qiáng)。
作者還提出了一個(gè)針對視頻修復(fù)場景的時(shí)間視頻修復(fù)定位(TVIL)數(shù)據(jù)集。實(shí)驗(yàn)結(jié)果表明,該方法在多個(gè)基準(zhǔn)數(shù)據(jù)集上取得了 state-of-the-art 的性能,明顯優(yōu)于之前的方法。
核心功能:
1. 提出時(shí)序特征異常注意力(TFAA)模塊增強(qiáng)對篡改的檢測
2. 設(shè)計(jì)并行交叉注意力特征金字塔網(wǎng)絡(luò)(PCA-FPN)進(jìn)行特征增強(qiáng)
3. 在視頻修復(fù)場景提出新的TVIL數(shù)據(jù)集
4. 在多個(gè)數(shù)據(jù)集上優(yōu)于已有方法