鏡頭隨人物而動,視訊編輯服務讓使用者穩站C位

HMSCore發表於2022-05-25

現如今,視訊是使用者記錄生活最熱門的方式,各種App在釋出視訊介面都提供了視訊簡單剪輯的功能。除了增加音樂、濾鏡、貼紙這些基礎功能以外,使用者越來越追求鏡頭感,這往往需要通過專業的視訊剪輯軟體手動打上關鍵幀,進行放大、縮小、移動等操作才能實現,這增加了使用者分享視訊的門檻,不利於UGC內容的生產。

有沒有可以把固定鏡頭視訊自動生成隨角色位移的動態追蹤鏡頭視訊的開放能力呢?

HMS Core視訊編輯服務面向開發者提供了快速構建人物追蹤的能力,讓使用者在編輯視訊時自動鎖定中心位,輕鬆生成具有主角鏡頭感的專業視訊。

功能介紹

人物追蹤支援對使用者輸入的視訊中某個特定人物進行自動鎖定,輕鬆生成特定人物的主角視訊。比如旅遊出行場景下,使用者在景區拍攝的視訊往往背景雜亂、人員眾多,但在剪輯時使用人物追蹤功能,使用者就可以穩站“C位”,無懼紛雜。

效果展示

使用人物追蹤前後對比

開發步驟

1. 開發準備

詳細準備步驟可參考華為開發者聯盟官網

2. 編輯工程整合

2.1 設定應用的鑑權資訊

可以通過api_key或者Access Token來設定應用鑑權資訊。

通過setAccessToken方法設定Access Token,在應用啟動時初始化設定一次即可,無需多次設定。

MediaApplication.getInstance().setAccessToken("your access token");

通過setApiKey方法設定api_key,在應用啟動時初始化設定一次即可,無需多次設定。

MediaApplication.getInstance().setApiKey("your ApiKey");

2.2 設定唯一標識ID,即License ID

License ID是進行管控的有效憑證,您要保證設定License ID的唯一性。

MediaApplication.getInstance().setLicenseId("License ID");

2.2.1 初始化Editor執行環境

建立編輯工程,需要首先建立Editor物件並初始化其執行環境。當離開編輯工程時,應釋放Editor例項。

1) 建立Editor物件

HuaweiVideoEditor editor = HuaweiVideoEditor.create(getApplicationContext());

2) 指定預覽視窗的佈局位置

預覽視窗負責視訊影像畫面的渲染,由視訊編輯原子能力SDK內部建立SurfaceView來實現。在建立視窗之前,需要在您的App中指定預覽視窗的佈局位置。

<LinearLayout    
    android:id="@+id/video_content_layout"    
    android:layout_width="0dp"    
    android:layout_height="0dp"    
    android:background="@color/video_edit_main_bg_color"    
    android:gravity="center"    
    android:orientation="vertical" />
// 指定預覽視窗 
LinearLayout mSdkPreviewContainer = view.findViewById(R.id.video_content_layout);

// 設定預覽視窗承載的佈局 
editor.setDisplay(mSdkPreviewContainer);

3) 初始化執行環境,如果License鑑權失敗,會丟擲LicenseException。

當Editor物件建立之後,此時還沒有佔用實際的系統資源,需要手動選擇其環境初始化的時機,此時視訊編輯原子能力SDK內部會建立必須的執行緒和定時器等。

try {
        editor.initEnvironment();
   } catch (LicenseException error) { 
        SmartLog.e(TAG, "initEnvironment failed: " + error.getErrorMsg());    
        finish();
        return;
   }

2.2.2 新增視訊、圖片
建立一條視訊泳道,然後往泳道上新增圖片或者視訊素材。圖片和視訊素材需要通過檔案路徑新增到泳道上。

// 獲取時間線物件 
HVETimeLine timeline = editor.getTimeLine();

// 建立視訊泳道 
HVEVideoLane videoLane = timeline.appendVideoLane();

// 在視訊泳道的末尾,新增視訊資源 
HVEVideoAsset videoAsset = videoLane.appendVideoAsset("test.mp4");

// 在視訊泳道的末尾,新增圖片資源 
HVEImageAsset imageAsset = videoLane.appendImageAsset("test.jpg");

3. 人物追蹤能力整合

// 初始化人物跟蹤引擎
visibleAsset.initHumanTrackingEngine(new HVEAIInitialCallback() {
        @Override
        public void onProgress(int progress) {
        // 初始化進度
        }

        @Override
        public void onSuccess() {
        // 初始化成功
        }

        @Override
        public void onError(int errorCode, String errorMessage) {
        // 初始化失敗
    }
   });

// 通過座標點選中指定的人物進行跟蹤,返回人物的矩形輪廓座標
List<Float> rects = visibleAsset.selectHumanTrackingPerson(bitmap, position2D);

// 開啟人物跟蹤特效
visibleAsset.addHumanTrackingEffect(new HVEAIProcessCallback() {
        @Override
        public void onProgress(int progress) {
            // 處理進度
        }

        @Override
        public void onSuccess() {
            // 處理成功
        }

        @Override
        public void onError(int errorCode, String errorMessage) {
            // 處理失敗
        }
});

// 中斷人物跟蹤
visibleAsset.interruptHumanTracking();

// 移除人物跟蹤特效
visibleAsset.removeHumanTrackingEffect();

瞭解更多詳情>>
訪問視訊編輯服務開發者聯盟官網

獲取視訊編輯服務開發指導文件

訪問華為開發者聯盟官網
獲取開發指導文件
華為移動服務開源倉庫地址:GitHubGitee

關注我們,第一時間瞭解 HMS Core 最新技術資訊~

相關文章