如何获得“照片”来自人脸检测方块？

Question

我正在构建一个应用程序，它将拍摄一个人的全身图像，并为该人生成一个“照片”。

面部照片是指该人的整个脸部、颈部、头发和耳朵的图像，其大小与另一张面部照片相同。

目前我正在使用
http://askernest.com/archive/2008/05 /03/人脸检测-in-c.aspx
实现 OpenCV 并用作

harrcascade_frontalface_default.xml  
harrcascade_frontalface_alt.xml  
harrcascade_frontalface_alt2.xml  
harrcascade_frontalface_alt_tree.xml

我的级联。

我使用所有级联，因为单个级联无法检测到我所有的面孔。当我得到所有级联检测到的所有面孔后，我找到了我的平均平方，并用它来最终猜测照片的高度和宽度。

我的问题是 3 个部分。

• 我目前的进程相当缓慢。如何加快检测过程？
  编辑：我发现处理时间与照片尺寸直接相关。减小照片的大小可能会有所帮助。

• 单个级联无法检测到我遇到的所有面孔，因此我正在使用所有面孔。这当然会产生许多不同的方块和一些误报。我可以使用什么方法来识别误报并将其排除在平均平方计算之外？前任。
  编辑：我正在实现标准差内的平均值。很快就会发布代码。

• 我不太确定在给定面部坐标的情况下找到照片的最佳方法。在哪里可以找到面部照片比例？
  编辑：解决了这个问题。假设我所有的头都是他们脸的比例。

  静态公共矩形 GetMugshotRectangle(矩形 rFace)
  {
      int y2、x2、w2、h2；
  
      //根据需要调整
      双倍高度比 = 2;
  
      y2 = Convert.ToInt32(rFace.Y - rFace.Height * (heightRatio - 1.0) / 2.0);
      h2 = Convert.ToInt32(rFace.Height * heightRatio);
      //照片中的高宽比为 1.25 : 1
      w2 = Convert.ToInt32(h2 * 4 / 5);
      x2 = Convert.ToInt32((rFace.X + rFace.Width / 2) - w2 / 2);
  
      返回新的矩形（x2，y2，w2，h2）；
  }
  

  
  我只需要消除这些误报。

好吧，这是 4 个问题。

• 我们将使用的相机目前无法使用，因此我目前没有捕获图像的方法。我在哪里可以找到不纯粹的人的全身图像，例如谷歌的全身图像图像搜索？
  编辑：“站立的人”进行了很好的搜索:)

Answer 1

如果以这种方式设置，单个级联可以完成所有级联所做的事情，而且它不会提供多个结果供您判断。您使用的级联可能在组成教学图片的集合或某些参数上有所不同。

有关如何构建自己的级联的教程可以在此处找到。获取用于训练您使用的四个级联的图片会很有用，但我不知道它们是否是公开的。

Answer 2

如果您在 2020 年代阅读这个问题，那么已经开发出更新的解决方案来简化此任务。可能值得一看的库包括

• FaceONNX (NuGet)，它基于 System.Drawing 并包含作者提供的模型
• FaceAiSharp (NuGet）基于 ImageSharp 并使用公开可用的状态 -最先进的人脸识别模型 (ArcFace)和人脸检测（InsightFace 的 SCRFD）。还有一个交互式教程，其中提供了实践示例。
• Azure 认知服务等云服务

来解决照片问题使用 FaceAiSharp 的任务，您可以使用与此类似的代码：

1. dotnet new console

2. dotnet 添加包 FaceAiSharp.Bundle
   dotnet 添加包 Microsoft.ML.OnnxRuntime
   

3. 编辑Program.cs：

using FaceAiSharp;
using SixLabors.ImageSharp;
using SixLabors.ImageSharp.PixelFormats;

// adjust these lines to load your own image
using var hc = new HttpClient();
var groupPhoto = await hc.GetByteArrayAsync(
    "https://upload.wikimedia.org/wikipedia/commons/1/1e/1942_JFK_uniform_portrait.jpg");
var img = Image.Load<Rgb24>(groupPhoto);

var det = FaceAiSharpBundleFactory.CreateFaceDetector();
FaceAiSharp.Applications.CropProfilePicture(det, img, scaleFactor: 1.5f);
img.Save("mugshot.jpg");

4. dotnet run

尝试不同的 scaleFactor 值来扩大或缩小裁剪范围。

免责声明：我是 FaceAiSharp 的作者。它是麻省理工学院许可的。如果某些内容不适合您或可能会出现问题，请随时提出问题改善了。

Answer 3

好吧，我明白了，但该项目目前处于冻结状态。
我没有可以粘贴的源代码，因为虚拟机需要很长时间才能加载。
如果有人真的感兴趣，请告诉我，我会发帖。
如果您发现一些看起来可以做得更好的事情，请告诉我。

我采取的步骤如下。

1. 加载图像，如果高度或宽度大于 500 像素，则将版本的新图像缩小到最大 500 像素高度或宽度。保存秤。
2. 在 询问 Ernest 上运行 C# OpenCV 实现所有正面 Harrcascades 位于 骚扰训练。
3. 由于某种原因，Ask Ernest 生成的矩形需要放大 1.3 倍
4. ，生成的矩形使用标准差 消除误报。我对矩形的每个角执行此操作，找到每个矩形角与平均角位置的距离。我记下了任何一个角不正常的矩形，并将其从候选矩形列表中删除。
5. 从剩余的矩形中获取平均矩形，并在问题中应用上面的“GetMugshotRectangle”。
6. 使用我们在步骤 1 中保存的比例缩放照片矩形。
7. 从原始图像中剪切照片并保存到新位置。

完毕！

Answer 4

我建议您使用上半身 Haar 级联文件，它将返回到肩部的矩形。
请在“http://alereimondo.no-ip.org/OpenCV/ 找到头肩级联文件34 "