VideoSink.OnSample 中的字节流看起来如何？

Question

在 Silverlight 中，VideoSink.OnSample 方法用于获取原始网络摄像头数据。函数签名如下：

protected abstract void OnSample(
    long sampleTimeInHundredNanoseconds,
    long frameDurationInHundredNanoseconds,
    byte[] sampleData
)

sampleData 的文档说

包含视频数据的字节流。根据相关视频格式信息将字节流处理成样本。

转到 VideoFormat 类，进入 视频格式。 PixelFormat 属性根据 文档：

• 未知 - 格式未知。
• Format32bppArgb - 该格式每个像素使用 32 位颜色信息，并使用 Alpha、红色、蓝色和绿色通道报告颜色信息。

我想了解 VideoSink.OnSample 方法看起来像。它只是像下面这样的像素数组吗？

sampleData[0] = image[x = 0, y = 0].R;
sampleData[1] = image[x = 0, y = 0].G;
sampleData[2] = image[x = 0, y = 0].B;
sampleData[3] = image[x = 0, y = 0].A;
sampleData[4 to 7] = image[x = 0, y = 1];
sampleData[8 to 11] = image[x = 0, y = 2];
sampleData[4*Height-4 to 4*Height-1] = image[x = 0, y = Height];
sampleData[4*Height to 4*Height+3] = image[x = 1, y = 0];
// ...

如果这么简单：顺序正确吗？

• 对于每个像素，R 先于 G，先于 B，先于 A
• ，第一列的所有像素，第二列的所有像素，依此类推

Answer 1

对于 Format32bppArgb 像素格式，字节流如下所示：

sampleData[0- 3] = image[x=0, y=0]
sampleData[4- 7] = image[x=1, y=0]
sampleData[8-11] = image[x=2, y=0]
      ...                ...
                   image[x=w, y=0]
                   image[x=0, y=1]
                         ...
                   image[x=w, y=h]

因此，它是逐行存储的。

对于以字节 i 到 i+3 存储的每个像素，信息如下：

sampleData[i+0] = BLUE
sampleData[i+1] = GREEN
sampleData[i+2] = RED
sampleData[i+3] = ALPHA

所有通道都存储为 [0; 范围内的整数]。 255] 其中 255 表示颜色通道的最大强度，并且表示 Alpha 通道的不透明。因此，除了排序之外，它的工作原理与预期一致。