AI 应用之 Custom Vision检测是否戴口罩

语雀知识库：https://www.yuque.com/seanyu/azure/customvision

公众号：

什么是自定义视觉（Custom Vision）什么是自定义视觉（Custom Vision）

自定义视觉是一种认知服务，用于生成、部署和改进自己的图像分类器。自定义视觉允许你确定要应用的标签，比如要对一组水果进行识别，你需要对待检测的水果打上诸如“苹果”“香蕉”“草莓”的标签。

作用

自定义视觉服务使用机器学习算法为图像应用标签。你作为开发人员必须提供多组图像（例如苹果，香蕉，草莓），其中包含或缺少相关的特征。请在提交时自行标记图像（标记该水果是香蕉还是苹果），然后，此算法会针对该数据进行训练并计算其自己的准确度，方法是针对这些相同的图像自行进行测试。训练算法以后，即可对其进行测试、重新训练，并最终使用它根据应用的需求对新图像分类。也可导出模型本身，方便脱机使用。

分类和对象检测

可以将自定义视觉功能分为两种功能。 图像分类可将一个或多个标签应用到图像。 对象检测与之类似，但还在图像中返回坐标，坐标中可以找到应用的标签。

优化

自定义视觉服务经过优化，可以快速识别图像之间的主要差异，因此你可以使用少量数据开始原型制作。开始时，每个标签通常可以包含 50 个图像。此服务不适用于检测图像中的细微差异（例如，在质量保证方案中检测细微裂纹或凹陷）。

另外，可以从多种自定义视觉算法中进行选择，这些算法已针对包含某些主题内容（例如特征点或零售商品）的图像进行了优化。

案例-使用自定义视觉实现识别是否戴口罩

1.在Azure Portal创建自定义视觉

选择自定义视觉进行创建，注意，目前自定义视觉仅在Global Azure可用。

训练和预测尽量选择最靠近最终使用位置的区域。

2.在自定义视觉门户创建“对象检测”项目

创建完成后，点击自定义视觉门户进入控制台。

点击新建项目，创建一个“对象检测类型的项目”

3.在自定义视觉的Portal上传大于100张图片，其中50张戴口罩，50张不戴口罩

注: 本案例中的图像均来自互联网。

对图像的一些基本要求：

为了有效地训练模型，请使用具有视觉多样性的图像。选择在以下方面有所不同的图像：

照相机角度
照明
background
视觉样式
个人/分组主题
size
type

此外，请确保所有训练图像满足以下条件：

.jpg、.png、.bmp 或 .gif 格式
大小不超过 6 MB （预测图像不超过 4 MB）
最短的边不小于 256 像素；任何小于此像素的图像将通过自定义影像服务自动纵向扩展

4.在Portal上对图片进行标记，标记为戴口罩和不戴口罩

添加“mask”和“nomask”两个Tag

依次点击未标记的图像，在口罩部位（建议保留耳朵，眼睛，鼻子等特征）标记“mask”或“nomask”；

标记完成一张后，点击右侧的翻页箭头直至所有图像都标记完成。

5.进行训练

点击训练按钮，开始训练。

评估检测器

完成训练后，将计算并显示模型的性能。自定义视觉服务使用提交用于训练的图像来计算精度、召回率和平均精度。精度和召回率是检测器有效性的两个不同度量值：

精确度（Precision ）表示已识别的正确分类的分数。例如，如果模型将 100 张图像识别为狗，实际上其中 99 张是狗，那么精确度为 99%。
召回率（Recall ）表示正确识别的实际分类的分数。例如，如果实际上有 100 张苹果的图像，并且该模型将 80 张标识为苹果，则召回率为 80%。

概率阈值

请注意“性能”选项卡左窗格上的“概率阈值”滑块。这是预测被视为正确时所需具有的置信度（用于计算精度和召回率）。

当使用较高的概率阈值来解释预测调用时，它们往往会以高精度返回结果，但以召回率为代价 — 检测到的分类是正确的，但许多仍未被检测到。使用较低的概率阈值则恰恰相反 — 实际分类会被检测到，但该集合内有更多误报。考虑到这一点，应该根据项目的特定需求设置概率阈值。稍后，在客户端接收预测结果时，应使用与此处所用概率阈值相同的概率阈值。