之前釋出過[一行程式碼實現安卓螢幕採集編碼](https://blog.csdn.net/anyRTC/article/details/120431493)，並介紹瞭如何螢幕採集編碼並進行了封裝，簡單的呼叫即可實現MediaProjection許可權申請、H264硬編碼、錯誤處理等功能。本文將介紹新增的功能，還是隻需一行程式碼即可實現螢幕、聲音採集。

### 一行程式碼實現螢幕採集編碼

之前的文章，我們已經介紹過如何一行程式碼實現安卓螢幕採集編碼，這裡再次簡單介紹一下

```kotlin
ScreenShareKit.init(this).onH264({ buffer, isKeyFrame, w, h, ts ->
    //獲取編碼後的螢幕內容資料
}).onStart({
    //使用者同意採集，開始採集資料
}).start()
```

透過這段程式碼，我們可以實現MediaProjection許可權申請、H264硬編碼、錯誤處理等功能。同時，我們也新增了一個onStart回撥，會在使用者同意螢幕採集後回撥該方法，更加方便的處理業務。

## 增加全域性螢幕旋轉監測

在之前版本中，螢幕旋轉，會導致畫面變形，寬高錯亂。本次更新中，螢幕旋轉監測是透過反射監聽IRotationWatcher來實現的。IRotationWatcher是一個AIDL介面，它定義了一個旋轉監測器，用於監測螢幕旋轉事件。在ScreenShare庫中，我們透過反射獲取IRotationWatcher物件，並註冊一個IRotationWatcher.Stub例項來監聽螢幕旋轉事件。當螢幕旋轉時，該Stub例項會收到回撥，並根據旋轉角度重置編碼器，更改寬高，以保證螢幕方向正確。這裡不是簡單判斷裝置是否旋轉，而是判斷螢幕內容或者其他app佈局是否旋轉。然後重置編碼器，更改寬高。始終保持方向正確。

參考：[scrcpy](https://github.com/Genymobile/scrcpy/blob/master/server/src/main/aidl/android/view/IRotationWatcher.aidl)

## 增加RGBA資料回撥

由於Android裝置多，各類 CPU 效能不一。很難保證每個裝置硬編碼後都能夠清晰流暢。所以新增一種方式，使用ImageReader採集螢幕截圖，有很多開源庫截圖都是利用這個類。ImageReader是Android系統提供的一個用於獲取螢幕截圖的類，透過setOnImageAvailableListener回撥，能夠不停地獲取螢幕變化，並獲取RGBA資料。在這裡我們透過建立一個ImageReader物件，並設定其寬高、畫素格式等引數來獲取螢幕資料。在回撥函式中，我們可以獲取到每一幀的RGBA資料，並進行處理。該實現雖然比硬編碼佔用的記憶體高一點，但優勢在於非常的均衡，無論效能強悍或是低端的CPU，都能夠得到畫質較清晰流暢的資料。

```kotlin
ScreenShareKit.init(this).config(screenDataType = EncodeBuilder.SCREEN_DATA_TYPE.RGBA).onRGBA(object : RGBACallBack {
    override fun onRGBA(
        rgba: ByteArray,
        width: Int,
        height: Int,
        stride: Int,
        rotation: Int,
        rotationChanged: Boolean
    ) {
        //採集的RGBA資料
    }
}).onStart({
    //使用者同意採集，開始採集資料
}).start()
```

## 增加螢幕內建聲音採集回撥

Android 10已引入AudioPlaybackCapture API。應用可以藉助此API複製其他應用正在播放的音訊。此功能類似於螢幕採集，但採集物件是音訊。主要用例是影片線上播放應用，這些應用希望捕獲遊戲正在播放的音訊。

```java
AudioPlaybackCaptureConfiguration config = (new AudioPlaybackCaptureConfiguration.Builder(mediaProjection)).addMatchingUsage(AudioAttributes.USAGE_MEDIA).build();
AudioFormat audioFormat = (new AudioFormat.Builder()).setEncoding(AudioFormat.ENCODING_PCM_16BIT).setSampleRate(sampleRate).setChannelMask(channelConfig).build();
audioRecord = new AudioRecord.Builder().setAudioFormat(audioFormat).setBufferSizeInBytes(bufferSizeInBytes).setAudioPlaybackCaptureConfig(config).build();
```

**注意：**應用的音訊能否被捕獲也取決於應用的 `targetSdkVersion`。

- 僅支援Android 10及以上版本
- 預設情況下，適配Android 9.0及之前版本的應用不允許捕獲播放的音訊。如要啟用該功能，請在應用的 `manifest.xml` 檔案中包含 `android:allowAudioPlaybackCapture="true"`。
- 預設情況下，適配Android 10 (API級別29)或更高版本的應用允許其他應用捕獲其音訊。如要停用“捕獲播放的音訊”功能，請在應用的 `manifest.xml` 檔案中包含 `android:allowAudioPlaybackCapture="false"`。

使用：

```kotlin
ScreenShareKit.init(this).config(audioCapture = true).onAudio(object : AudioCallBack {
    override fun onAudio(buffer: ByteArray?, ts: Long) {
        //應用的音訊資料
    }
}).onStart({
    //使用者同意採集，開始採集資料
}).start()
```

參考捕獲播放的音訊：[官方文件](https://developer.android.google.cn/guide/topics/media/playback-capture?hl=zh-cn)

## 增加禁音螢幕內建聲音方法

在應用採集過程中，如果不想中斷又想禁音，可以呼叫以下方法。

```kotlin
ScreenShareKit.setMicrophoneMute(true)
```

設定為true之後，將會回撥空資料，已達到靜音效果。反正，恢復正常音訊採集。

以上就是本文介紹的一些實用功能。透過這個庫，我們可以透過簡單的一行程式碼實現螢幕、聲音採集，並且支援全域性螢幕旋轉監測、RGBA資料回撥、螢幕內建聲音採集等功能。這個庫使用起來非常方便，專案地址：[ScreenShare](https://github.com/LxzBUG/ScreenShare)

![在這裡插入圖片描述](https://img-blog.csdnimg.cn/fdb8d2d5764f4fd69d65c49ce93ceb48.jpeg#pic_center)

Android技術分享 | 一行程式碼實現螢幕、聲音採集

相關文章