opencv-android笔记1：android studio 2.3 + opencv-android-sdk 实现 camera预览

Android studio环境配置不再赘述，可以参照我的其他博客。
Android应用程序开发环境搭建：http://blog.csdn.net/ja33son/article/details/61192072

Opencv-android-sdk：链接：http://pan.baidu.com/s/1boI67nh 密码：umu2

新建项目后，File-New-Import Module，选择解压后sdk中android项目的路径：opencv-3.2.0-android-sdk\OpenCV-android-sdk\sdk\java，引入module!

出现错误了不要紧，先不去管它，切换到project界面下，打开app的build.gradle文件，以及引入的module的build.gradle文件。将app中build.gradle的部分字段复制到module中，字段包括compileSdkVersion、buildToolsVersion、minSdkVersion、targetSdkVersion，复制到对应位置，目的是为了使两个module的编译环境相同。不这么做，就报错给你看。

不要忘记，改变build.gradle以后，Sync你的工程。

下一步是很关键的，将解压后的库文件（opencv-3.2.0-android-sdk\OpenCV-android-sdk\sdk\native\下的libs文件夹）添加到项目目录（app/src/main/）中。要将目录名字改为jniLibs。
注：我们使用到的库，只有每个平台文件夹（arm64-v8a、armeabi、armeabi-v7a、mips、mips64、x86、x86_64）下的libopencv_java3.so，感兴趣的同学可以将其他库移除，会有效减小apk体积。也可以使用Lint Cleaner Plugin或者AndroidStudio自带的瘦身工具，这里不做演示。

之后，将引入的module作为外部库项目导入到app中，开发环境就搭建好了。
注：Project Structure的快捷键是Ctrl+Shift+Alt+s

环境搭建完成后，就可以做一些简单的工作了。以下是获取opencv camera图像数据，并对图像进行简单处理的demo。

首先是Manifest.xml配置文件，声明一下相机的权限。由于Android M以后，权限机制改变，只声明已经失效了，需要在activity中申请，后面会详细说明。

添加以下权限：
<uses-permission android:name="android.permission.CAMERA" />

<?xml version="1.0" encoding="utf-8"?>

<manifest xmlns:android="http://schemas.android.com/apk/res/android"

    package="com.ja3son.cvcamera">

    <uses-permission android:name="android.permission.CAMERA" />

    <application

        android:allowBackup="true"

        android:icon="@mipmap/ic_launcher"

        android:label="@string/app_name"

        android:roundIcon="@mipmap/ic_launcher_round"

        android:supportsRtl="true"

        android:theme="@style/AppTheme">

        <activity android:name=".MainActivity">

            <intent-filter>

                <action android:name="android.intent.action.MAIN" />

                <category android:name="android.intent.category.LAUNCHER" />

            </intent-filter>

        </activity>

    </application>

</manifest>

然后是布局文件：

<?xml version="1.0" encoding="utf-8"?>

<FrameLayout xmlns:android="http://schemas.android.com/apk/res/android"

    xmlns:opencv="http://schemas.android.com/apk/res-auto"

    xmlns:tools="http://schemas.android.com/tools"

    android:layout_width="match_parent"

    android:layout_height="match_parent">

    <org.opencv.android.JavaCameraView

        android:id="@+id/camera_view"

        android:layout_width="match_parent"

        android:layout_height="match_parent"

        opencv:show_fps="true" />

</FrameLayout>

在引入org.opencv.android.JavaCameraView的时候，preview窗口可能会报错，只需要在preview窗口提示的信息中，点击一下build，就可以解决了。
注：以上解决方法在Android Studio2.3中适用，其他版本中没有进行测试，即使现在不build，最后运行项目的时候也会build的。以上方法只提供给强迫症患者

JavaCameraView就是提供相机预览的类了，但让人失望的是，JavaCameraView没有调用Camera API2接口，而是使用老版本Camera API1。后续会做opencv接入Camera API2的东西，感兴趣的同学可以持续关注。

之后就是Activity文件：

import android.Manifest;

import android.os.Build;

import android.os.Bundle;

import android.support.v7.app.AppCompatActivity;

import org.opencv.android.CameraBridgeViewBase;

import org.opencv.android.JavaCameraView;

import org.opencv.android.OpenCVLoader;

import org.opencv.core.Mat;

public class MainActivity extends AppCompatActivity implements CameraBridgeViewBase.CvCameraViewListener2 {

    private JavaCameraView camera_view;

    private int M_REQUEST_CODE = 203;

    private String[] permissions = {Manifest.permission.CAMERA};

    @Override

    protected void onCreate(Bundle savedInstanceState) {

        super.onCreate(savedInstanceState);

        setContentView(R.layout.activity_main);

        camera_view = (JavaCameraView) findViewById(R.id.camera_view);

        camera_view.setCvCameraViewListener(this);

        if (Build.VERSION.SDK_INT >= Build.VERSION_CODES.M) {

            requestPermissions(permissions, M_REQUEST_CODE);

        }

    }

    @Override

    protected void onPause() {

        super.onPause();

        if (camera_view != null) {

            camera_view.disableView();

        }

    }

    @Override

    protected void onResume() {

        super.onResume();

        if (OpenCVLoader.initDebug()) {

            camera_view.enableView();

        }

    }

    @Override

    protected void onDestroy() {

        super.onDestroy();

        if (camera_view != null) {

            camera_view.disableView();

        }

    }

    @Override

    public void onCameraViewStarted(int width, int height) {

    }

    @Override

    public void onCameraViewStopped() {

    }

    @Override

    public Mat onCameraFrame(CameraBridgeViewBase.CvCameraViewFrame inputFrame) {

        return inputFrame.rgba();

    }

}

简单解释一下activity中进行的操作：

activity实现CameraBridgeViewBase.CvCameraViewListener2接口，实现对camera数据的监听和控制。

onCreate方法中初始化View，申请权限，设置监听。camera_view.setCvCameraViewListener(this)设置监听后，重写方法就可以获得camera预览数据了。直接调用requestPermissions方法，就会在程序初始化时弹出系统预制的权限申请对话框，在Android N中是如此，其他版本中未验证。由于此代码只是demo，且本人懒，所以没做权限拒绝申请相关的处理，感兴趣的同学可以实现onRequestPermissionsResult方法进行控制。

onResume方法中初始化opencv库，初始化成功，则进行camera_view.enableView()操作，使view开始预览。如果全部按照前面步骤操作，就不存在初始化库失败的情况。如果存在，请参考前文，重新来过。

onCameraFrame方法中只是返回了原始图像，return inputFrame.rgba()。这时运行程序，就能在屏幕上看到相机的图像了。只不过图像是横着的，因为我懒，没旋转。以下代码是对图像进行简单图像处理的代码，将

    @Override

    public void onCameraViewStarted(int width, int height) {

    }

    @Override

    public void onCameraViewStopped() {

    }

    @Override

    public Mat onCameraFrame(CameraBridgeViewBase.CvCameraViewFrame inputFrame) {

        return inputFrame.rgba();

    }

全部替换为：

    private Mat mCannyResult;

    @Override

    public void onCameraViewStarted(int width, int height) {

        mCannyResult = new Mat(height, width, CvType.CV_8UC1);

    }

    @Override

    public void onCameraViewStopped() {

        mCannyResult.release();

    }

    @Override

    public Mat onCameraFrame(CameraBridgeViewBase.CvCameraViewFrame inputFrame) {

        Imgproc.Canny(inputFrame.gray(), mCannyResult, 60, 80);

        return mCannyResult;

    }

结果图就是

对图像的处理可以简单说明一下：
在StartCamera的时候，初始化一个Mat，这个Mat是8位无符号整形单通道矩阵（CvType.CV_8UC1），为什么是单通道呢？都知道RGB是三个通道，每个颜色一个，RGBA是四通道，多出一个Alpha透明度通道。灰度图，不需要颜色通道，所以一个通道就够了。因为我们只需要取灰度数据就足够检测边缘了，没错，我们对图像简单的处理就是Canny检测边缘。
有了Mat以后，在onCameraFrame方法中，调用Imgproc.Canny(inputFrame.gray(), mCannyResult, 60, 80)方法，简单说一下参数，第一个为原始数据，就是camera预览的灰度图。第二个是输出图像，就是Canny以后的数据。后两个double类型的参数，就是边缘检测的阈值边界。以例子为准的话，低于60的点不算作边缘。在60与80之间的点，参考周围点，如果周围有边界点，则记为边缘点。高于80的点，为边缘点。

以上就是opencv的入门demo了，结合这个就可以做很多有意思的东西了。后续会做android studio 结合NDK开发opencv的例子，敬请关注。

巴特西

opencv-android笔记1：android studio 2.3 + opencv-android-sdk 实现 camera预览

最新文章

热门文章