人脸识别、活体检测(眨眼、摇头、张嘴动作)

人脸识别、活体检测(眨眼、摇头、张嘴动作)clmtrackr  项目总结

项目需求 / 步骤实现描述:

1、申请摄像头权限,开始识别面部信息、同时开始录像 ;

2、随机顺序生成面部检验动作;

3、并开始倒计时,需10s内完成该组检验动作;

4、完成动作通过后,停止录像。

5、截取一张图片;并将录像和图片、检验动作、检验结果上传后台保存;

6、上传成功根据返回结果登录系统页面。

一、遇到的问题及解决方案

问题1、ios苹果系统在微信中允许摄像头权限后,页面无人像并一片空白问题。或是有些苹果机需要手动点击页面的视频播放才能出现视频人像;

  因为微信浏览器没有开启ios摄像头的权限,所以才会出现有些需要手动再次点击播放才能出现。 (ios系统安全机制,需使用自带的safari浏览器才可以有权限)

问题2、ios或是部分手机的视频录制格式 MediaRecorder-MIME 格式被客户端录制;

问题1解决方案:

        创建页面监听(WeixinJSBridgeReady)
        原理:对页面加载进行监听,等待微信客户端页面加载完毕后,自动触发音频播放

<video id="Video" preload autoplay loop muted webkit-playsinline="true" playsinline="true"></video>
<script>

// 使用微信自带的WeixinJSBridgeReady事件

document.addEventListener('WeixinJSBridgeReady', function() {

    document.getElementById('Video').play()

})
</script>

问题2解决方案:

增加类型的判断

var p = navigator.mediaDevices.getUserMedia({ audio: true, video: true });
p.then(function(stream) {
      var _this = this;
      console.log('stream.id----', stream.id);
      var options = {
           mimeType: 'video/webm;codecs=vp9' // '默认'
      };
            
       if (!MediaRecorder.isTypeSupported(options.mimeType)) {
                logger('ondataavailable', 'MIME 格式无法被客户端录制');
                var types = [
                    'video/webm\;codecs=vp8',
                    'audio/mp4',
                    'video/mp4',
                    'video/webm',
                    'audio/webm',
                    'video/webm\;codecs=daala',
                    'video/webm\;codecs=h264',
                    'audio/webm\;codecs=opus',
                    'video/mpeg'
                ];

                for (var i in types) {
                    logger('判断类型: ', types[i]);
                    if (MediaRecorder.isTypeSupported(types[i])) {
                        options.mimeType = types[i]
                        logger('MediaRecorder-MIME 录制类型: Maybe!', types[i]);
                        break
                    }
                }
            } 

            if (!MediaRecorder.isTypeSupported) {
                options.mimeType = 'audio/mp4'
            }
             _this.recoder = new MediaRecorder(stream, options);
             console.log('stream', stream)
             _this.recoder.ondataavailable = function (e) {
                    recodedBuffer.push(e.data);
                    logger('ondataavailable', '录制数据有效', e, e.data, e.data.size);
              }
       ...
               _this.recoder.start();
               ...
})

 

posted @ 2022-09-21 10:31  小贝馨  阅读(2262)  评论(0编辑  收藏  举报