天道辅文 發表於 2020-5-25 22:13:00

Android | 超简单集成HMS ML Kit实现最大脸微笑抓拍

<h1 id="前言">前言</h1>
<p>  如果大家对HMS ML Kit 人脸检测功能有所了解，相信已经动手调用我们提供的接口编写自己的APP啦。目前就有小伙伴在调用接口的过程中反馈，不太清楚HMS ML Kit 文档中的MLMaxSizeFaceTransactor这个接口的使用方法。为了让大家更加深刻的了解我们的接口，方便在场景中使用，在这篇文章中小编准备抛砖引玉，大家可以打开思路，多多尝试。如果有小伙伴想要深入的了解更加全面具体的功能，请大家移步https://developer.huawei.com/consumer/cn/hms/huawei-mlkit。</p>
<hr>
<h1 id="场景">场景</h1>
<p>  相信大家都有在五一、十一出去游玩的经历，是不是都是这样的people mountain people sea.</p>
<p><img src="https://img-blog.csdnimg.cn/20200525174237176.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDcwODI0MA==,size_16,color_FFFFFF,t_70#pic_center"><br>
  好不容易找个人少的地方，结果拍出来的照片是这样的。</p>
<p><img src="https://img-blog.csdnimg.cn/20200525174445295.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDcwODI0MA==,size_16,color_FFFFFF,t_70#pic_center"><br>
  这样的</p>
<p><img src="https://img-blog.csdnimg.cn/20200525214238969.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDcwODI0MA==,size_16,color_FFFFFF,t_70#pic_center"><br>
  还有这样的</p>
<p><img src="https://img-blog.csdnimg.cn/20200525214546976.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDcwODI0MA==,size_16,color_FFFFFF,t_70#pic_center"></p>
<p>  不看不知道，原来我的面部表情这么丰富。。是不是很心累？每次想要发个出去浪的朋友圈，都要在白天拍的成百上千张类似款的照片里，花上一小时才能找到一张能看的照片。。。</p>
<p><img src="https://img-blog.csdnimg.cn/20200525214656123.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDcwODI0MA==,size_16,color_FFFFFF,t_70#pic_center"></p>
<p>  为了解决类似问题，HMS ML Kit 提供了追踪识别画面中最大脸的接口，能够识别图像中的最大脸，方便对跟踪图像中的”重点目标“做相关操作和处理。本文中就简单的调用MLMaxSizeFaceTransactor这个接口，实现最大脸微笑抓拍的功能。</p>
<hr>
<h1 id="开发前准备">开发前准备</h1>
<h2 id="android-studio-安装">android studio 安装</h2>
<p>  很简单，下载安装即可。具体下载链接：<br>
  Android studio 官网下载链接：https://developer.android.com/studio<br>
  Android studio安装流程参考链接：https://www.cnblogs.com/xiadewang/p/7820377.html</p>
<h2 id="在项目级gradle里添加华为maven仓">在项目级gradle里添加华为maven仓</h2>
<p>  打开AndroidStudio项目级build.gradle文件</p>
<p><img src="https://img-blog.csdnimg.cn/20200525214924373.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDcwODI0MA==,size_16,color_FFFFFF,t_70#pic_center"></p>
<p>  增量添加如下maven地址：</p>
<pre><code class="language-java">buildscript {
   {      
      maven {url 'http://developer.huawei.com/repo/'}
    }   
}
allprojects {
    repositories {      
      maven { url 'http://developer.huawei.com/repo/'}
    }
}
</code></pre>
<h2 id="在应用级的buildgradle里面加上sdk依赖">在应用级的build.gradle里面加上SDK依赖</h2>
<p><img src="https://img-blog.csdnimg.cn/20200525215016717.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDcwODI0MA==,size_16,color_FFFFFF,t_70#pic_center"></p>
<h2 id="在androidmanifestxml文件里面增量添加模型自动下载">在AndroidManifest.xml文件里面增量添加模型自动下载</h2>
<p>  要使应用程序能够在用户从华为应用市场安装您的应用程序后，自动将最新的机器学习模型更新到用户设备，请将以下语句添加到该应用程序的AndroidManifest.xml文件中：</p>
<pre><code class="language-java">&lt;manifest   
    ...   
    &lt;meta-data                     
      android:name="com.huawei.hms.ml.DEPENDENCY"         
      android:value= " face"/&gt;
...   
&lt;/manifest&gt;
</code></pre>
<h2 id="在androidmanifestxml文件里面申请相机访问网络和存储权限">在AndroidManifest.xml文件里面申请相机、访问网络和存储权限</h2>
<pre><code class="language-java">&lt;!--相机权限--&gt;
&lt;uses-feature android:name="android.hardware.camera" /&gt;
&lt;uses-permission android:name="android.permission.CAMERA" /&gt;
&lt;!--写权限--&gt;
&lt;uses-permission android:name="android.permission.WRITE_EXTERNAL_STORAGE" /&gt;
</code></pre>
<hr>
<h1 id="代码开发关键步骤">代码开发关键步骤</h1>
<h2 id="动态权限申请">动态权限申请</h2>
<pre><code class="language-java">@Override
public void onCreate(Bundle savedInstanceState) {
    ……
    if (!allPermissionsGranted()) {
      getRuntimePermissions();
    }
</code></pre>
<h2 id="创建人脸识别检测器">创建人脸识别检测器</h2>
<p>  可以通过人脸识别检测配置器“MLFaceAnalyzerSetting”创建人脸识别检测器。</p>
<pre><code class="language-java">MLFaceAnalyzerSetting setting =
                new MLFaceAnalyzerSetting.Factory()
                        .setFeatureType(MLFaceAnalyzerSetting.TYPE_FEATURES)
                        .setKeyPointType(MLFaceAnalyzerSetting.TYPE_UNSUPPORT_KEYPOINTS)
                        .setMinFaceProportion(0.1f)
                        .setTracingAllowed(true)
                        .create();
</code></pre>
<p>  通过MLMaxSizeFaceTransactor.Creator创建“MLMaxSizeFaceTransactor”对象用于处理检测到的最大脸，其中objectCreateCallback()方法是在检测到对象的时候调用的，objectUpdateCallback()方法是在对象更新了的时候调用的，在方法里通过Overlay在识别到的最大人脸上标记了一个方块，并通过检测结果获取MLFaceEmotion来识别微笑表情触发拍照。</p>
<pre><code class="language-java">MLMaxSizeFaceTransactor transactor = new MLMaxSizeFaceTransactor.Creator(analyzer, new MLResultTrailer&lt;MLFace&gt;() {
                @Override
                public void objectCreateCallback(int itemId, MLFace obj) {
                  LiveFaceAnalyseActivity.this.overlay.clear();
                  if (obj == null) {
                        return;
                  }
                  LocalFaceGraphic faceGraphic =
                            new LocalFaceGraphic(LiveFaceAnalyseActivity.this.overlay, obj, LiveFaceAnalyseActivity.this);
                  LiveFaceAnalyseActivity.this.overlay.addGraphic(faceGraphic);
                  MLFaceEmotion emotion = obj.getEmotions();
                  if (emotion.getSmilingProbability() &gt; smilingPossibility) {
                        safeToTakePicture = false;
                        mHandler.sendEmptyMessage(TAKE_PHOTO);
                  }
                }

                @Override
                public void objectUpdateCallback(MLAnalyzer.Result&lt;MLFace&gt; var1, MLFace obj) {
                  LiveFaceAnalyseActivity.this.overlay.clear();
                  if (obj == null) {
                        return;
                  }
                  LocalFaceGraphic faceGraphic =
                            new LocalFaceGraphic(LiveFaceAnalyseActivity.this.overlay, obj, LiveFaceAnalyseActivity.this);
                  LiveFaceAnalyseActivity.this.overlay.addGraphic(faceGraphic);
                  MLFaceEmotion emotion = obj.getEmotions();
                  if (emotion.getSmilingProbability() &gt; smilingPossibility &amp;&amp; safeToTakePicture) {
                        safeToTakePicture = false;
                        mHandler.sendEmptyMessage(TAKE_PHOTO);
                  }
                }

                @Override
                public void lostCallback(MLAnalyzer.Result&lt;MLFace&gt; result) {
                  LiveFaceAnalyseActivity.this.overlay.clear();
                }

                @Override
                public void completeCallback() {
                  LiveFaceAnalyseActivity.this.overlay.clear();

                }
            }).create();
this.analyzer.setTransactor(transactor);
</code></pre>
<h2 id="通过lensenginecreator创建lensengine实例进行视频流的人脸检测检测">通过LensEngine.Creator创建LensEngine实例进行视频流的人脸检测检测</h2>
<pre><code class="language-java">this.mLensEngine = new LensEngine.Creator(context, this.analyzer).setLensType(this.lensType)
                .applyDisplayDimension(640, 480)
                .applyFps(25.0f)
                .enableAutomaticFocus(true)
                .create();
</code></pre>
<h2 id="启动相机预览进行人脸检测">启动相机预览进行人脸检测</h2>
<pre><code class="language-java">this.mPreview.start(this.mLensEngine, this.overlay);
</code></pre>
<hr>
<p>往期链接：快服务常见TOP3审核雷区，再不过审就要崩溃啦！<br>
内容来源：https://developer.huawei.com/consumer/cn/forum/topicview?tid=0201256372685820478&amp;fid=18<br>
原作者：littlewhite</p><br><br>
来源：https://www.cnblogs.com/developer-huawei/p/12961210.html
頁: [1]
查看完整版本: Android | 超简单集成HMS ML Kit实现最大脸微笑抓拍