iOS 图像处理（失真）

Question

我最初考虑到 CoreImage 来解决这个问题（因为我还需要进行面部识别），但不幸的是，我意识到 iPhone 上尚未包含 CI 失真滤镜。

我尝试深入研究 GLImageProcessing、CImg 和 ImageMagick，尽管我在找到学习这些内容的起点时遇到了很多困难。

考虑到市面上有很多会造成图像失真的应用程序，我知道这并不是一件非常困难的事情。

我不懂 C 或 C++，除非绝对必要，否则没有时间学习这些语言。如果这些库之一是处理此任务的权威库，那么就有必要。

有人有使用这些库的经验吗？

有没有专门针对 iOS5 介绍此内容的书籍？

我找到的资源：

• GLImageProcessing 示例项目 https://developer.apple.com/library/ios/ #samplecode/GLImageProcessing/Introduction/Intro.html

• ImageMagick &魔法棒 http://www.imagemagick.org/script/magick-wand.php

• CI毫克 http://cimg.sourceforge.net/

• 简单的 iPhone 图像处理 http://code.google.com/p/simple-iphone-image-处理/

Answer 1

正如你所说，Core Image 目前的功能在 iOS 上有点有限。特别是，缺少像桌面上那样的自定义内核令人失望。您列出的其他替代方案（GLImageProcessing 除外，它无法执行此类过滤）都是 CPU 密集型库，对于在移动设备上进行实时过滤来说速度太慢。

不过，我可以向您推荐一个名为 GPUImage 的开源框架，我刚刚推出了它，因为我无法'找不到可以让您实现自定义效果的东西。顾名思义，GPUImage 使用 OpenGL ES 2.0 着色器对静态图像和视频进行 GPU 加速处理。您可以使用它们编写自己的自定义效果，因此您应该能够做您能想到的任何事情。该框架本身是 Objective-C 的，并且有一个相当简单的界面。

作为失真过滤器的示例，以下着色器（基于 Danny Pflughoeft 的答案 中的代码）执行某种操作鱼眼效果：

varying highp vec2 textureCoordinate;
uniform sampler2D inputImageTexture;

const mediump float bulgeFactor = 0.5;

void main()
{
    mediump vec2 processedTextureCoordinate = textureCoordinate - vec2(0.5);
    mediump float radius = processedTextureCoordinate.x * processedTextureCoordinate.x + processedTextureCoordinate.y * processedTextureCoordinate.y;
    mediump vec2 distortedCoordinate = vec2(pow(radius, bulgeFactor)) * processedTextureCoordinate + vec2(0.5);

    gl_FragColor = texture2D(inputImageTexture, distortedCoordinate);
}

这会在视频流上产生这种效果：

在我的基准测试中， GPUImage 处理图像的速度比 iPhone 4 上的 Core Image 快 4 倍（比 CPU 处理速度快 6 倍），处理视频的速度比 Core Image 快 25 倍（比 CPU 上的处理快 70 倍）。即使在最坏的情况下，它的处理速度也与 Core Image 相匹配。

该框架仍然相当新，因此我现在拥有的库存过滤器的数量很少，但我很快就会添加更多。同时，您可以编写自己的自定义失真着色器来处理您的图像，并且所有内容的源代码都可供您根据需要进行调整。 我的介绍性文章详细介绍了如何在您的应用程序中使用它。