前言
最近給自己挖了幾個坑,準備填一下。現在來填一下第一個坑:圖片模糊。關於圖片模糊的方法有很多,比如:Open CV 的各種圖片處理、Android 支援的高效能密集型任務執行框架 RenderScript、Java 或者 C/C++ 的演算法實現圖片模糊處理。本篇文章將包含以下內容:
- RenderScript 簡介與圖片模糊的實現
- Java / C++ 演算法實現圖片模糊處理
- 一個簡單的動態模糊實現
- 總結
至於 Open CV 我以前的一些文有些簡單的介紹,如果只是想模糊圖片就引入整個的 Open CV 個人感覺還是有點“殺雞用牛刀”的感覺。對了,關於演算法實現什麼的……我只是個程式碼收集者,並非我自己實現的。
開始之前先放個圖,做成什麼樣心裡有點x數
如果你看過我同學的那篇Android:簡單靠譜的動態高斯模糊效果 你一定會發現我這個佈局跟他的有那麼一些相似,哇哈哈哈哈哈,你猜對了,我去他專案裡複製的。當然了,實現方式不一樣,他是用的 RecyclerView 實現的,我這裡就自己複寫了 Activity 的 onTouch 實現的動態模糊。
RenderScript
首先簡單的介紹一下 RenderScript 這裡是我讀文件的翻譯……又到了展現真正的辣雞英語水平的時候了……
RenderScript 是 Android 上的高效能運算密集型任務的框架。雖然序列工作也能受益,但是RenderScript 主要面向並行資料計算。RenderScript 執行時可以跨越裝置上可用的處理器如多核CPU和GPU進行並行工作。這讓你可以專注於演算法,而不是排程工作。RenderScript 對於應用進行影象處理,計算攝影或者計算機視覺等方面特別有用。 要開始使用RenderScript,有兩個主要概念應該要理解:
-
語言本身是為了編寫高效能運算程式碼產生的 C99 衍生語言。這篇文章描述瞭如何使用它去編寫一個計算核心。
-
控制 API 是用來管理 RenderScript 資源的生命週期和控制核心執行的。這套API有三套語言實現:Java,Android NDK 的 C++ 和 C99 派生的核心語言本身。
恩,BB這麼多,我們只需要有個大致概念就行了,因為也不是專門去學習這套框架,我們只是需要使用這套框架的一丁點圖片處理相關的東西而已。千言萬語,最後就一句話:
RenderScript 是 Android 上的高效能運算密集型任務的框架
複製程式碼
行,對 RenderScript 有了大致的瞭解後,可以開始了,官方文件裡其實有比較詳細的流程,先建立什麼 context 啦,然後分配記憶體巴拉巴拉的拉,不過我這又不是在學RenderScript,而是想實現一個功能,用完就可以把這框架扔一邊了,如果你也是這樣,不妨直接 copy 下面的程式碼:
/**
* 圖片縮放比例
*/
private static final float BITMAP_SCALE = 0.4f;
/**
* 最大模糊度(在0.0到25.0之間)
*/
private static final float BLUR_RADIUS = 25f;
public static Bitmap blur(Context context, Bitmap image) {
// 計算圖片縮小後的長寬
int width = Math.round(image.getWidth() * BITMAP_SCALE);
int height = Math.round(image.getHeight() * BITMAP_SCALE);
// 將縮小後的圖片作為預渲染的圖片
Bitmap inputBitmap = Bitmap.createScaledBitmap(image, width, height, false);
// 建立一張渲染後的輸出圖片
Bitmap outputBitmap = Bitmap.createBitmap(inputBitmap);
// 初始化 RenderScript 上下文
RenderScript rs = RenderScript.create(context);
// 建立一個模糊效果的 RenderScript 的工具物件
ScriptIntrinsicBlur blur = ScriptIntrinsicBlur.create(rs, Element.U8_4(rs));
// 由於RenderScript並沒有使用VM來分配記憶體,所以需要使用Allocation類來建立和分配記憶體空間。
// 建立Allocation物件的時候其實記憶體是空的,需要使用copyTo()將資料填充進去。
Allocation tmpIn = Allocation.createFromBitmap(rs, inputBitmap);
Allocation tmpOut = Allocation.createFromBitmap(rs, outputBitmap);
// 設定渲染的模糊程度, 25f是最大模糊度
blur.setRadius(BLUR_RADIUS);
// 設定blurScript物件的輸入記憶體
blur.setInput(tmpIn);
// 將輸出資料儲存到輸出記憶體中
blur.forEach(tmpOut);
// 將資料填充到Allocation中
tmpOut.copyTo(outputBitmap);
return outputBitmap;
}
複製程式碼
執行效果:
Java & C++
這兩種都是採用同一種演算法實現的,本質上都是對畫素陣列進行處理運算。本來我以為C++的方式會快一些,沒想到在我的mix2上執行反而是Java實現的演算法會快一些。唉,真是辣雞C++還不如Java。 當然了……講道理,程式碼我看了,就是一樣的,可能是jni的開銷吧。這裡為什麼要介紹Javah和C++的演算法實現呢,因為RenderScript雖然文件上說可以執行在2.3及以上的平臺,但是這個圖片處理的api最低版本是17。所以說,如果你有需要相容低版本,還是得采用下別的實現。
這裡只放一下Java的實現程式碼,因為反而比較快的關係……至於JNI,我這裡偷了個懶,因為以前用CMake專案編譯生成了so,所以這裡直接引用了so。當然了cpp原始碼也放在了專案裡,感興趣的可以自己去編譯一下:
/**
* StackBlur By Java Bitmap
*
* @param bmp bmp Image
* @param radius Blur radius
* @return Image Bitmap
*/
public static Bitmap blurInJava(Bitmap bmp, int radius) {
// Stack Blur v1.0 from
// http://www.quasimondo.com/StackBlurForCanvas/StackBlurDemo.html
//
// Java Author: Mario Klingemann <mario at quasimondo.com>
// http://incubator.quasimondo.com
// created Feburary 29, 2004
// Android port : Yahel Bouaziz <yahel at kayenko.com>
// http://www.kayenko.com
// ported april 5th, 2012
// This is a compromise between Gaussian Blur and Box blur
// It creates much better looking blurs than Box Blur, but is
// 7x faster than my Gaussian Blur implementation.
//
// I called it Stack Blur because this describes best how this
// filter works internally: it creates a kind of moving stack
// of colors whilst scanning through the image. Thereby it
// just has to add one new block of color to the right side
// of the stack and remove the leftmost color. The remaining
// colors on the topmost layer of the stack are either added on
// or reduced by one, depending on if they are on the right or
// on the left side of the stack.
//
// If you are using this algorithm in your code please add
// the following line:
//
// Stack Blur Algorithm by Mario Klingemann <mario@quasimondo.com>
if (radius < 1) {
return (null);
}
Bitmap bitmap = ratio(bmp, bmp.getWidth() * BITMAP_SCALE, bmp.getHeight() * BITMAP_SCALE);
// Bitmap bitmap = bmp.copy(Bitmap.Config.ARGB_8888, true);
// Return this none blur
if (radius == 1) {
return bitmap;
}
bmp.recycle();
int w = bitmap.getWidth();
int h = bitmap.getHeight();
int[] pix = new int[w * h];
// get array
bitmap.getPixels(pix, 0, w, 0, 0, w, h);
// run Blur
int wm = w - 1;
int hm = h - 1;
int wh = w * h;
int div = radius + radius + 1;
short r[] = new short[wh];
short g[] = new short[wh];
short b[] = new short[wh];
int rSum, gSum, bSum, x, y, i, p, yp, yi, yw;
int vMin[] = new int[Math.max(w, h)];
int divSum = (div + 1) >> 1;
divSum *= divSum;
short dv[] = new short[256 * divSum];
for (i = 0; i < 256 * divSum; i++) {
dv[i] = (short) (i / divSum);
}
yw = yi = 0;
int[][] stack = new int[div][3];
int stackPointer;
int stackStart;
int[] sir;
int rbs;
int r1 = radius + 1;
int routSum, goutSum, boutSum;
int rinSum, ginSum, binSum;
for (y = 0; y < h; y++) {
rinSum = ginSum = binSum = routSum = goutSum = boutSum = rSum = gSum = bSum = 0;
for (i = -radius; i <= radius; i++) {
p = pix[yi + Math.min(wm, Math.max(i, 0))];
sir = stack[i + radius];
sir[0] = (p & 0xff0000) >> 16;
sir[1] = (p & 0x00ff00) >> 8;
sir[2] = (p & 0x0000ff);
rbs = r1 - Math.abs(i);
rSum += sir[0] * rbs;
gSum += sir[1] * rbs;
bSum += sir[2] * rbs;
if (i > 0) {
rinSum += sir[0];
ginSum += sir[1];
binSum += sir[2];
} else {
routSum += sir[0];
goutSum += sir[1];
boutSum += sir[2];
}
}
stackPointer = radius;
for (x = 0; x < w; x++) {
r[yi] = dv[rSum];
g[yi] = dv[gSum];
b[yi] = dv[bSum];
rSum -= routSum;
gSum -= goutSum;
bSum -= boutSum;
stackStart = stackPointer - radius + div;
sir = stack[stackStart % div];
routSum -= sir[0];
goutSum -= sir[1];
boutSum -= sir[2];
if (y == 0) {
vMin[x] = Math.min(x + radius + 1, wm);
}
p = pix[yw + vMin[x]];
sir[0] = (p & 0xff0000) >> 16;
sir[1] = (p & 0x00ff00) >> 8;
sir[2] = (p & 0x0000ff);
rinSum += sir[0];
ginSum += sir[1];
binSum += sir[2];
rSum += rinSum;
gSum += ginSum;
bSum += binSum;
stackPointer = (stackPointer + 1) % div;
sir = stack[(stackPointer) % div];
routSum += sir[0];
goutSum += sir[1];
boutSum += sir[2];
rinSum -= sir[0];
ginSum -= sir[1];
binSum -= sir[2];
yi++;
}
yw += w;
}
for (x = 0; x < w; x++) {
rinSum = ginSum = binSum = routSum = goutSum = boutSum = rSum = gSum = bSum = 0;
yp = -radius * w;
for (i = -radius; i <= radius; i++) {
yi = Math.max(0, yp) + x;
sir = stack[i + radius];
sir[0] = r[yi];
sir[1] = g[yi];
sir[2] = b[yi];
rbs = r1 - Math.abs(i);
rSum += r[yi] * rbs;
gSum += g[yi] * rbs;
bSum += b[yi] * rbs;
if (i > 0) {
rinSum += sir[0];
ginSum += sir[1];
binSum += sir[2];
} else {
routSum += sir[0];
goutSum += sir[1];
boutSum += sir[2];
}
if (i < hm) {
yp += w;
}
}
yi = x;
stackPointer = radius;
for (y = 0; y < h; y++) {
// Preserve alpha channel: ( 0xff000000 & pix[yi] )
pix[yi] = (0xff000000 & pix[yi]) | (dv[rSum] << 16) | (dv[gSum] << 8) | dv[bSum];
rSum -= routSum;
gSum -= goutSum;
bSum -= boutSum;
stackStart = stackPointer - radius + div;
sir = stack[stackStart % div];
routSum -= sir[0];
goutSum -= sir[1];
boutSum -= sir[2];
if (x == 0) {
vMin[y] = Math.min(y + r1, hm) * w;
}
p = x + vMin[y];
sir[0] = r[p];
sir[1] = g[p];
sir[2] = b[p];
rinSum += sir[0];
ginSum += sir[1];
binSum += sir[2];
rSum += rinSum;
gSum += ginSum;
bSum += binSum;
stackPointer = (stackPointer + 1) % div;
sir = stack[stackPointer];
routSum += sir[0];
goutSum += sir[1];
boutSum += sir[2];
rinSum -= sir[0];
ginSum -= sir[1];
binSum -= sir[2];
yi += w;
}
}
// set Bitmap
bitmap.setPixels(pix, 0, w, 0, 0, w, h);
return (bitmap);
}
複製程式碼
動態模糊
這裡實現的效果圖就是開頭的那張gif了,首先要明白一點,動態模糊,不可能每一幀都去呼叫方法生成一張模糊圖,那樣效率太低了。這裡看了別人的思路,先生成一張模糊圖片,之後在原來的佈局上放上兩個ImageView,一張原圖,上面的一張是模糊圖,動態改變上面模糊圖的透明值就能實現動態透明效果。這想法闊以,只生成了一次模糊圖片。
這裡底部佈局我本來是想放一個佈局在螢幕外,後來發現這樣無論怎麼滑動都不能把佈局滑入。可能是程式碼有問題,也可能是父容器的問題。於是之後就寫了個全屏的佈局,但是在介面啟動後將之移動到螢幕外。設定了上下兩塊可點選將佈局滑出的區域,在滑動的時候動態設定模糊圖片控制元件的alpha值,這樣就實現了動態模糊,話不多說,上關鍵程式碼: 佈局程式碼:
<?xml version="1.0" encoding="utf-8"?>
<RelativeLayout xmlns:android="http://schemas.android.com/apk/res/android"
android:layout_width="match_parent"
android:layout_height="match_parent">
<ImageView
android:id="@+id/iv_img"
android:src="@drawable/test"
android:scaleType="fitXY"
android:layout_width="match_parent"
android:layout_height="match_parent" />
<ImageView
android:id="@+id/iv_blur_img"
android:scaleType="fitXY"
android:alpha="0"
android:layout_width="match_parent"
android:layout_height="match_parent" />
<LinearLayout
android:id="@+id/rl_container"
android:layout_width="match_parent"
android:layout_height="match_parent"
android:orientation="vertical">
<TextView
android:id="@+id/tv_tem"
android:layout_width="match_parent"
android:layout_height="wrap_content"
android:layout_margin="10dp"
android:fontFamily="sans-serif-thin"
android:gravity="bottom"
android:text="37°"
android:textColor="@android:color/white"
android:textSize="90sp" />
<LinearLayout
android:layout_width="match_parent"
android:layout_height="120dp"
android:layout_marginTop="36dp"
android:background="#44000000"
android:orientation="vertical"
android:paddingLeft="20dp">
<TextView
android:layout_width="match_parent"
android:layout_height="wrap_content"
android:layout_marginTop="10dp"
android:text="WeatherInfo"
android:textColor="@android:color/white"
android:textSize="24sp" />
<TextView
android:layout_width="match_parent"
android:layout_height="wrap_content"
android:layout_marginBottom="10dp"
android:layout_marginTop="10dp"
android:text="Show more info"
android:textColor="@android:color/white" />
</LinearLayout>
<LinearLayout
android:layout_width="match_parent"
android:layout_height="120dp"
android:layout_marginTop="36dp"
android:background="#44000000"
android:orientation="vertical"
android:paddingLeft="20dp">
<TextView
android:layout_width="match_parent"
android:layout_height="wrap_content"
android:layout_marginTop="10dp"
android:text="WeatherInfo"
android:textColor="@android:color/white"
android:textSize="24sp" />
<TextView
android:layout_width="match_parent"
android:layout_height="wrap_content"
android:layout_marginBottom="10dp"
android:layout_marginTop="10dp"
android:text="Show more info"
android:textColor="@android:color/white" />
</LinearLayout>
<LinearLayout
android:layout_width="match_parent"
android:layout_height="120dp"
android:layout_marginTop="36dp"
android:background="#44000000"
android:orientation="vertical"
android:paddingLeft="20dp">
<TextView
android:layout_width="match_parent"
android:layout_height="wrap_content"
android:layout_marginTop="10dp"
android:text="WeatherInfo"
android:textColor="@android:color/white"
android:textSize="24sp" />
<TextView
android:layout_width="match_parent"
android:layout_height="wrap_content"
android:layout_marginBottom="10dp"
android:layout_marginTop="10dp"
android:text="Show more info"
android:textColor="@android:color/white" />
</LinearLayout>
</LinearLayout>
</RelativeLayout>
複製程式碼
Activity程式碼:
package com.xiasuhuei321.blur;
import android.content.Context;
import android.graphics.BitmapFactory;
import android.os.Bundle;
import android.os.Handler;
import android.support.annotation.Nullable;
import android.support.v7.app.AppCompatActivity;
import android.util.Log;
import android.view.MotionEvent;
import android.view.View;
import android.view.Window;
import android.view.WindowManager;
import android.widget.ImageView;
import com.xiasuhuei321.gank_kotlin.ImageProcess;
/**
* Created by xiasuhuei321 on 2017/10/15.
* author:luo
* e-mail:xiasuhuei321@163.com
*/
public class DynamicBlurActivity extends AppCompatActivity {
private ImageView blurImg;
private int height;
private View container;
@Override
protected void onCreate(@Nullable Bundle savedInstanceState) {
super.onCreate(savedInstanceState);
supportRequestWindowFeature(Window.FEATURE_NO_TITLE);
int flag = WindowManager.LayoutParams.FLAG_FULLSCREEN;
//獲得當前窗體物件
Window window = this.getWindow();
//設定當前窗體為全屏顯示
window.setFlags(flag, flag);
setContentView(R.layout.activity_dynamic_blur);
initView();
WindowManager wm = (WindowManager) getSystemService(Context.WINDOW_SERVICE);
height = wm.getDefaultDisplay().getHeight();
}
private void initView() {
blurImg = (ImageView) findViewById(R.id.iv_blur_img);
blurImg.setImageBitmap(ImageProcess.blur(this,
BitmapFactory.decodeResource(getResources(), R.drawable.test)));
container = findViewById(R.id.rl_container);
new Handler().postDelayed(new Runnable() {
@Override
public void run() {
container.setTranslationY(height + 100);
}
}, 100);
}
float y;
boolean scrollFlag = false;
float sumY = 0;
boolean isShow = false;
@Override
public boolean onTouchEvent(MotionEvent event) {
switch (event.getAction()) {
case MotionEvent.ACTION_DOWN:
y = event.getY();
if (y > height * 0.9) {
scrollFlag = true;
} else if (y < height * 0.1) {
if (!isShow) return false;
scrollFlag = true;
}
break;
case MotionEvent.ACTION_MOVE:
sumY = event.getY() - y;
if (scrollFlag) {
container.setTranslationY(event.getY());
if (!isShow) blur(sumY);
else reverseBlur(sumY);
}
Log.e("DynamicBlurActivity", "滾動sumY值:" + sumY + " scrollFlag:" + scrollFlag);
break;
case MotionEvent.ACTION_UP:
if(scrollFlag) {
if (Math.abs(sumY) > height * 0.5) {
if (isShow) hide();
else show();
} else {
if (isShow) show();
else hide();
}
sumY = 0;
}
scrollFlag = false;
break;
}
return true;
}
private void hide() {
container.setTranslationY(height + 100);
blur(0);
isShow = false;
}
private void show() {
container.setTranslationY(0);
blur(1000);
isShow = true;
}
private void blur(float sumY) {
float absSum = Math.abs(sumY);
float alpha = absSum / 1000;
if (alpha > 1) alpha = 1;
blurImg.setAlpha(alpha);
}
private void reverseBlur(float sumY) {
float absSum = Math.abs(sumY);
float alpha = absSum / 1000;
if (alpha > 1) alpha = 1;
blurImg.setAlpha(1 - alpha);
}
}
複製程式碼
總結
在剛開始的時候我非常的作死,選用的圖片是1080 * 1920 的,在處理的時候一看記憶體,我 * 飆到了200多M,而且處理這張圖片花費了6.6秒左右的時間。我列印了一下這圖片轉化成Bitmap的width和height 分別是
這如果是 ARGB_8888 那麼一張圖就是61M,加上處理需要一個畫素陣列,得,另一個61M。剩下在處理畫素的時候各種申請的記憶體飆到200M也不是不可以理解。本來我想是不是可以使用同一張 Bitmap,在最後setPixels的時候就不用再申請一次記憶體了,但是發現這樣不行,直接報錯了。因為從資原始檔拿到的 Bitmap 的 isMutable屬性是false,不可以直接在原來的 Bitmap 上 setPixels 。所以原來還需要拷貝一份Bitmap,不過拷貝之後可以將呼叫 bitmap.recycle() 方法,將之趕緊回收了。
當然,像我這樣頭鐵硬懟並不好,飆到200M市面上很多手機都會OOM……更好的方式是對縮圖進行模糊處理。Android裡有個縮圖工具,就幾個方法,還挺好用的,我這裡就用的縮圖工具獲取縮圖:
public static Bitmap ratio(Bitmap bmp, float pixelW, float pixelH) {
return ThumbnailUtils.extractThumbnail(bmp, (int) pixelW, (int) pixelH);
}
複製程式碼
在進行處理前先獲取縮圖,然後再去處理效率無疑會高非常多。
最後,放上專案地址:https://github.com/ForgetAll/Blur