阿里雲視訊雲 Retina 多媒體 AI 體驗館開張啦!

ApsaraVideo發表於2021-06-16

帶你體驗視訊更多可能

海量視訊管理難度大?翻庫檢索特定人物費時費力?視訊內容剪輯效率低?您的得力助手“Retina多媒體AI”體驗館已上線。帶你感受視訊AI黑科技,開啟極致智慧體驗。

圖片 1.png

1、智慧媒資管理,節省人力投入

Problem

Micheal 負責社交網站短視訊業務的運營工作,進行平臺視訊內容的管理。平臺每天會接收使用者上傳的數萬條小視訊,這些視訊都需要進行內容稽核和打標籤,以確保視訊中沒有違規內容,並方便後續的歸檔管理和視訊分發推薦。

傳統的方式是由平臺的稽核團隊人工來進行內容稽核,同時手動給視訊錄入內容標籤。平均每條視訊需要花費3分鐘,光是稽核打標工作就需要投入約100人的團隊來支援。隨著視訊業務的增長,人力和預算投入就跟不上了。

Solution

有了視訊雲強大的視訊AI功能協助,可以幫助快速進行智慧稽核和打標工作,大大節省時間和人力:

  • 使用智慧稽核能力來稽核內容,快速找出涉黃、暴恐、廣告等違規資訊,及時警示潛在的風險點,稽核人員僅需要少量的複核確認工作即可,可以解放90%以上的人力。
  • 使用智慧標籤功能,能夠自動將視訊內容標籤化,為視訊打上類別標籤,並詳細標記出視訊中哪些時間片段出現了哪些公眾人物、事件、場景、物體等資訊,幫助進行更精準的視訊推薦和視訊檢索。

圖片 2.png

  • 通過使用視訊DNA查重的功能,幫助平臺發現重複上傳的視訊內容,調整視訊的分發推薦策略,避免為使用者多次推薦重複視訊,提升使用者的觀看體驗。

2、人物翻庫搜尋,快速下架視訊

Problem

前陣子劣跡藝人和落馬官員新聞頻出,作為運營的 Micheal 又面臨成千上萬條視訊需要對全網相關視訊進行緊急下架問題,沒有足夠人手來對媒資庫內的所有視訊進行檢索,也沒有足夠時間去挨個下架,如何是好?

Solution

圖片 3.png

通過使用視訊雲多媒體AI的人物搜尋功能,可以在上傳入庫時即進行特徵分析,對視訊中出現的人物進行聚類。一旦需要檢索相關人物的視訊,可以根據特徵分析結果,快速檢索出全部出現該人物的內容,實現秒級的翻庫搜尋速度,高效完成視訊緊急下架的任務。

3、視訊智慧剪輯,提升製作效率

Problem

在視訊的剪輯製作過程中,對於視訊內容的處理也是十分讓人頭疼的。David 是一名新媒體視訊編輯,每天要花費大量時間來進行視訊內容的製作。他需要從多個綜藝節目視訊中,剪輯製作出一段明星的混剪短視訊,他需要做大量的重複工作:

  1. 從幾十條視訊裡逐個查詢定位明星出現的片段,作為視訊編輯的原始素材
  2. 再對每一個鏡頭仔細做畫面裁剪,去除一些字幕和臺標,確保人物處於畫面中心
  3. 選好一段配樂後,還要把每個視訊片段和轉場對齊音樂節奏
  4. 再加上視訊字幕的編輯、配音
  5. 如果要釋出到手機平臺,他還需要進行框選,確保人物不會出框

一套操作下來,僅僅半分鐘視訊成品,David 至少要花上好幾個小時。

Solution

使用視訊AI的智慧檢索和智慧剪輯技術,視訊內容生產將變得更方便快捷。

圖片 4.png

  • 在搜尋明星的視訊素材時,可以根據內容標籤快速搜尋定位到有明星出現的鏡頭,詳細到視訊的具體時間片段;

  • 花式組合檢索,人物+動作等,或者根據一張圖片或視訊查詢相似的片段,想要找什麼樣的視訊素材都可以信手拈來;

  • 在找到需要剪輯的素材後,如果原始視訊素材中有臺標、字幕,需要擦除後剪輯新的視訊,使用AI功能可以自動對字幕、臺標進行檢測和去除,還原純淨的視訊畫面;
    圖片 5.png

  • 使用橫屏轉豎屏功能,AI可以自動識別主體人物並進行畫面裁剪,一鍵生成豎屏的小視訊;
    圖片 6.png

  • 另外,AI可以根據視訊的語音自動生成字幕,或者根據剪輯作者輸入的文字自動生成旁白配音,不再需要費時費力自己錄入配音或敲入字幕;

  • 在給視訊加音樂配樂時,AI能夠幫助智慧識別歌曲的副歌、節拍點,根據節拍點來智慧編排視訊和圖片的轉場時間,生成動感的卡點視訊。

這樣,一個混剪視訊就一氣呵成地完成了,從之前的幾個小時,縮短到幾分鐘,大大提升了視訊剪輯速度。

看到這裡,有著同樣苦惱的你是否按捺不住想要親自體驗一番了?那就趕緊點選
retina.aliyun.com

「視訊雲技術」你最值得關注的音視訊技術公眾號,每週推送來自阿里雲一線的實踐技術文章,在這裡與音視訊領域一流工程師交流切磋。公眾號後臺回覆【技術】可加入阿里雲視訊雲技術交流群,和作者一起探討音視訊技術,獲取更多行業最新資訊。

本作品採用《CC 協議》,轉載必須註明作者和本文連結

相關文章