Mac OS X 相当于 DirectShow、GraphEdit

Question

Mac OS X 新手，熟悉 Windows。 Windows 具有 DirectShow、大量内置过滤器、COM 编程和 GraphEdit，可以非常快速地构建原型并窥探您在代码中构建的图形。

我现在要在 Mac 上使用相机、网络摄像头、麦克风、色彩空间、文件、分割、同步、渲染、文件读取、文件保存以及许多我在 DirecShow 中认为理所当然的事情将应用程序组合在一起进行现场表演时。在 Mac 方面，到目前为止我还没有发现……什么也没有！要么我不知道该去哪里寻找，要么我正经历着最艰难的时期，将 Mac 因易于处理媒体而闻名的声誉与连贯的编程能力联系起来，开始搞乱媒体操纵的构建块。

我看到了一些关于使用 gstreamer 或 QT 库的弱建议，但我无法让自己相信这是 Apple 的做法。我读过一些 QuickTime 文档，但我不打算做转换、精灵、广播……

大脑受过 DirectShow 训练意味着我什至不知道 Apple 如何考虑提供类似 DirectShow 的功能。这意味着我不知道正确的关键词，甚至不知道去哪里寻找。图书？买了几个。现在我也许可以编写一些代码来编辑你姐姐的婚礼视频（如果我不能在这个主题上取得不错的进展，我接下来可能会问这对你来说有什么价值），但要确定哪些过滤器可用以及如何将它们串在一起......什么都没有。建议？

Answer 1

目前，Mac 上的视频处理正在经历巨大转变。 QuickTime 非常古老，但也非常强大，因此在过去 5 年左右的时间里它一直在经历增量替换过程。

也就是说， QTKit 是 QuickTime 子集（捕获、播放、格式转换和基本视频编辑），今后将受到支持。遗留的 QuickTime API 目前仍然存在，并且可能至少会保留到其主要功能在其他地方可用之前，但仅限于 32 位。对于一些涉及的视频内容，您最终可能需要在某些地方使用它。

目前，iOS 领先于 Mac，因为它可以从头开始 AV 基金会。 Mac 媒体框架的未来可能要么直接是 AV Foundation（QTKit 是顶部的轻量级垫片），要么是看起来非常相似的 QTKit 扩展。

对于音频，Core Audio 已在 Mac 和 iOS 上运行，并且不会很快消失。它非常强大，但有些地方有点迟钝。幸运的是，在线支持非常好； 邮件列表是一项重要资源。

对于滤镜和帧级处理，您有 核心视频正如其他人提到的，以及核心图像。对于动态图形，有 Quartz Composer，其中包括图形编辑器和插件架构，可用于添加您自己的补丁。对于程序化动画和轻松混合渲染模型（OpenGL、Quartz、视频等），有核心动画< /a>.

除了所有这些之外，当然，如果内置的东西不能满足您的要求，您当然没有理由不能使用开源库。

---

要在下面解决您的评论：

在 QuickTime（和 QTKit）中，音频和视频等单独的数据类型表示为轨道。可能目前还不清楚 QuickTime 是否可以打开音频和视频文件格式。组合音频和视频的常见方法是：

1. 使用视频文件创建 QTMovie。
2. 使用您的音频文件创建一个QTMovie。
3. 获取表示音频的 QTTrack 对象，并将其添加到包含视频的 QTMovie 中。
4. 展平电影，因此它不仅仅包含对其他电影的引用，而且实际上包含音频数据。
5. 将电影写入磁盘。

这是来自 Blender 的示例。您将在 end_qt 函数。其中还使用了一些 Core Audio (AudioConverter*)。 （quicktime_export.c 但它似乎不做音频。）