CodeFormer是一款強大的人工智慧工具,主要用於影像和影片的修復和增強。它基於深度學習技術,特別是人臉復原模型,可以輕鬆修復和增強面部影像,提升照片和影片的質量和視覺效果
工作原理
1、透過自動編碼器實現人臉的變換,包括色彩化、清晰化、去馬賽克修復等功能
2、採用了預訓練VQGAN離散碼本空間的方法,將人臉復原任務轉成Code序列的預測任務,大幅度降低了復原任務對映的不確定性。同時,VQGAN的碼本先驗也為復原任務提供了豐富的人臉細節
3、透過Transformer全域性建模,進一步增加了模型對嚴重退化的魯棒性,使得復原的人臉更加真實
CodeFormer最新中文版:
百度網盤:https://pan.baidu.com/s/1FQpwrt9PNFGiZFEO4Dq1yw?pwd=8fw2
影像修復
CodeFormer的主要功能在於對影像進行高解析度重建和細節修復。這包括去除影像中的噪聲、馬賽克和其他損壞區域,同時恢復和增強原始影像的細節和色彩。由於其專為處理人臉設計,CodeFormer在人臉修復方面表現尤其出色,它可以處理各種複雜的人臉影像,從模糊到損壞,都能透過CodeFormer恢復到接近原始狀態的清晰度和色彩
影片增強
CodeFormer在影片修復方面同樣具有顯著的作用。它可以處理影片中的各種問題,如模糊、抖動、顏色失真等,從而提供更清晰、更穩定的影片觀看體驗。CodeFormer透過分析影片的每一幀,對影像進行逐一修復,使得修復後的影片在細節和色彩上都更接近原始狀態。此外,CodeFormer還具有對影片進行超解析度重建的功能,可以將低解析度的影片提升到高解析度
使用方法
博主將CodeFormer的功能細化成了5個模組,整合在一起,下面一一為大家介紹
1、單人影像增強:對只包含單個人物的圖片進行修復
2、多人影像增強:對包含了多個人物的圖片進行修復
3、單色影像彩色化:對黑白圖片或者單色背景圖片做彩色化處理
4、破損影像修復:對已破碎或毀壞的圖片進行修復(如缺失一角和塗鴉)
5、影片清晰度增強:去除人臉遮擋物,對低清晰度影片高畫質修復
點選“啟動”按鈕,程式開始工作,在控制檯可以檢視當前的處理進度,程式執行完畢會輸出資訊All results are saved in results
博主GTX1660的顯示卡,平均不到1秒處理5張圖片,速度還是很快的
注意事項
①處理圖片是選中資料夾,請將同一類圖片放在同一個資料夾下,程式會一次性處理
②處理影片是選中單個影片檔案,影片的格式必須是mp4、mov、avi
③除了多人影像增強,其餘選項需要先將圖片裁剪至512x512的解析度大小