pyaudio中的数据中的数据是什么格式和数据类型？

Question

我正在尝试将Pyaudio用于实时音频应用程序。我编写的作品的程序，但我正在尝试优化速度。此外，我遇到的主要问题是我正在尝试处理stream.read（）数据。在执行此操作的一般方法中，数据存储在一个名为“帧”的数组中，您只需将每个块附加到数组。然后将此数组处理到.WAV文件中。我想将其翻译成具有其数字价值的含义的整数或浮点，但我不知道这样做的转换。为了更清楚，我使用的代码将帧数组转换为.wav文件。然后，我使用声音弹来将.WAV文件数据重新转换为点。然后，我将这些点用于频率处理，并且效果很好。我想切断需要转换为WAV并从WAV返回以获取可用数据的需要。我相信数据值以字节格式为单位，但代表16位整数，但是当我除以2^16时，我没有得到正确的值。对此有些确认会有所帮助。这与我没有频率处理的事情类似

import pyaudio
import wave


filename = "recorded.wav"
chunk = 1024
FORMAT = pyaudio.paInt16
channels = 1
sample_rate = 44100
record_seconds = 5


p = pyaudio.PyAudio()
# open stream object as input & output
stream = p.open(format=FORMAT,
                channels=channels,
                rate=sample_rate,
                input=True,
                output=True,
                frames_per_buffer=chunk)
frames = []
print("Recording...")
for i in range(int(sample_rate / chunk * record_seconds)):
    #what is this value?????????
    data = stream.read(chunk)
    frames.append(data)

print("Finished recording.")

stream.stop_stream()
stream.close()
p.terminate()

wf = wave.open(filename, "wb")
wf.setnchannels(channels)
wf.setsampwidth(p.get_sample_size(FORMAT))
wf.setframerate(sample_rate)
wf.writeframes(b"".join(frames))
wf.close()

Answer 1

将其转换为整数列表，

#data = b"".join(frames)
data = b"\x01\x02\x01\x04"   # example data for test

result = []

for index in range(0, len(data), 2):
    value = int.from_bytes(data[index:index+2], 'big')
    result.append(value)
    #print(value)    

print(result)

它以字符字符串获取数据，您可以使用结果

[258, 260]

我只知道字符的顺序使用了哪个字符串中的16位整数 - big或little（big-endian或Little-endian）

---

编辑：

您还可以使用标准模块 struct 。

h表示16位unsigned整数和＆gt;表示big-endian

#data = b"".join(frames)
data = b"\x01\x02\x01\x04"

import struct

length = len(data) // 2
result = struct.unpack(f'>{length}H', data)

print(result)

或使用迭代器（因此您可以运行它使用每个块，而不是使用完整data）

result = []

for items in struct.iter_unpack(f'>H', data):
    result.append( items[0] )
    
print(result)

---

编辑：

您还可以使用标准模块 array

#data = b"".join(frames)
data = b"\x01\x02\x03\x04"
    
import array

#a = array.array('H')
#a.frombytes(data)

a = array.array('H', data)
a.byteswap()  # convert from little-endian to big-endian

print(a.tolist())    

---

如果您使用numpy，则可以使用 numpy.frombuffer ，

#data = b"".join(frames)
data = b"\x01\x02\x03\x04"

import numpy as np

arr = np.frombuffer(data, dtype='uint16')

print(arr)

但这使用little-endian order。

对于big-endian您可以使用dtype ='＆gt; u2'

arr = np.frombuffer(data, dtype='>u2')

或

dt = np.dtype('uint16').newbyteorder('>')
arr = np.frombuffer(data, dtype=dt)