ProPainter是一個基於E2FGVI實現的AI影片編輯工具,它結合了增強的傳播和Transformer機制,能夠快速高效地進行影片修復和水印去除
功能特點
· 物件移除:智慧地檢測和移除影片中的動態物體,對於去除不需要的元素或錯誤的特效非常有用
· 物件補全:填補影片中缺失的區域,通常用於修復受損的影片幀或損壞的部分,使其看起來完整和連貫
最新中文版:
百度網盤:https://pan.baidu.com/s/1leH6DIMcNOmQS-uT2WXLaQ?pwd=dx55
工作原理
1、首先使用高效的迴圈流補全網路來修復損壞的光流場,讓機器更好地理解影片幀之間的運動
2、在影像和特徵域中進行傳播,演算法從全域性和區域性時間幀中探索對應關係,以實現更可靠和有效的資訊傳播
3、將經過影像傳播操作的輸出影像送入Encoder編碼器,獲取區域性的Feature Prop,進一步處理和最佳化傳播的特徵
4、使用掩碼引導的稀疏Transformer塊對傳播的特徵進行精細調整,並採用僅考慮特定子集的稀疏策略,提高演算法的效率,減少記憶體消耗,同時保持高效能水平
使用方法
1、上傳需要處理的影片
2、在右側的區域裡,點選需要移除的物體,有時需要多點幾次,儘可能讓移除的物件被完整識別,如果識別錯誤,可以點選“撤銷”
3、點選“開始追蹤”,程式會自動執行,並生成準備移除物體的影片
4、上一步完成後,點選“去水印”按鈕,等待一段時間即可得到最終的結果,最後生成的影片會儲存在專案路徑的output資料夾下
以下是影片處理前後的效果對比,騎車的小男孩憑空消失了,看不出一點修改的痕跡
用ProPainter移除物體的同時可以順便去除陰影,有需要的小夥伴千萬別忘了~
注意事項
①專案安裝路徑不要包含中文
②推薦使用GTX1060以上顯示卡執行此專案
③使用過程中若不慎關閉軟體後臺,請重新開啟,並重新整理網頁