将音频缓冲区从 44100 重新采样到 16000

Question

我有 data-uri 格式的音频数据，然后我将此 data-uri 转换为缓冲区，现在我需要此缓冲区数据以新的采样率，当前音频数据为 44.1khz，我需要 16khz 的数据，如果我使用 RecordRTC API 录制了音频，如果我以低采样率录制音频，那么我的音频声音就会失真，所以我不知道如何重新采样我的音频缓冲区，

如果你们中的任何人对此有任何想法，请帮助我。

提前致谢:)

Answer 1

您可以使用 OfflineAudioContext 进行重采样，但您需要先将 data-uri 转换为 ArrayBuffer。此解决方案适用于浏览器，而不是服务器，因为在网络上发送质量较低的音频（较低的采样率）比在服务器上发送大量数据和重新采样要好。

// `source` is an AudioBuffer instance of the source audio
// at the original sample rate.

var TARGET_SAMPLE_RATE = 16000;

var offlineCtx = new OfflineAudioContext(source.numberOfChannels,
                                         source.duration * TARGET_SAMPLE_RATE,
                                         TARGET_SAMPLE_RATE);

// Play it from the beginning.
var offlineSource = offlineCtx.createBufferSource();
offlineSource.buffer = source;
offlineSource.connect(offlineCtx.destination);
offlineSource.start();
offlineCtx.startRendering().then((resampled) => {
  // `resampled` contains an AudioBuffer resampled at 16000Hz.
  // use resampled.getChannelData(x) to get an Float32Array for channel x.
});

Answer 2

没有答案是正确的。这是完美的代码。

// `sourceAudioBuffer` is an AudioBuffer instance of the source audio
// at the original sample rate.
const DESIRED_SAMPLE_RATE = 16000;
const offlineCtx = new OfflineAudioContext(sourceAudioBuffer.numberOfChannels, sourceAudioBuffer.duration * DESIRED_SAMPLE_RATE, DESIRED_SAMPLE_RATE);
const cloneBuffer = offlineCtx.createBuffer(sourceAudioBuffer.numberOfChannels, sourceAudioBuffer.length, sourceAudioBuffer.sampleRate);
// Copy the source data into the offline AudioBuffer
for (let channel = 0; channel < sourceAudioBuffer.numberOfChannels; channel++) {
    cloneBuffer.copyToChannel(sourceAudioBuffer.getChannelData(channel), channel);
}
// Play it from the beginning.
const source = offlineCtx.createBufferSource();
source.buffer = cloneBuffer;
source.connect(offlineCtx.destination);
offlineCtx.oncomplete = function(e) {
  // `resampledAudioBuffer` contains an AudioBuffer resampled at 16000Hz.
  // use resampled.getChannelData(x) to get an Float32Array for channel x.
  const resampledAudioBuffer = e.renderedBuffer;
}
offlineCtx.startRendering();
source.start(0);

Answer 3

如果您使用的是 chrome 浏览器，您可以直接在 AudioContext 中指定采样率。

1.您可以直接通过麦克风录制声音。

var context = new AudioContext({
    sampleRate: 16000,
});

2.如果您已经有一个文件或 ArrayBuffer 。那么您可以使用相同的音频上下文重新采样它

    const fileReader = new FileReader();
    fileReader.readAsArrayBuffer(target.files[0]);
    
    fileReader.onload =  (e) => {
        //e.target.result is an ArrayBuffer
        context.decodeAudioData(e.target.result, async function(buffer) {
        console.log(buffer)
    })
        
    

Answer 4

这只是 padenot 答案的副本，我对其进行了更新，以避免其他可能发现这篇文章并且遇到缺少变量定义或如何获得最终重新采样的 float32array 问题的人感到困惑。这在 Firefox 量子 64.0 中适用于我：

  var sourceAudioBuffer = e.inputBuffer;  // directly received by the audioprocess event from the microphone in the browser

  var TARGET_SAMPLE_RATE = 8000;
  var offlineCtx = new OfflineAudioContext(sourceAudioBuffer.numberOfChannels, sourceAudioBuffer.duration * sourceAudioBuffer.numberOfChannels * TARGET_SAMPLE_RATE, TARGET_SAMPLE_RATE);
  var buffer = offlineCtx.createBuffer(sourceAudioBuffer.numberOfChannels, sourceAudioBuffer.length, sourceAudioBuffer.sampleRate);
  // Copy the source data into the offline AudioBuffer
  for (var channel = 0; channel < sourceAudioBuffer.numberOfChannels; channel++) {
      buffer.copyToChannel(sourceAudioBuffer.getChannelData(channel), channel);
  }
  // Play it from the beginning.
  var source = offlineCtx.createBufferSource();
  source.buffer = sourceAudioBuffer;
  source.connect(offlineCtx.destination);
  source.start(0);
  offlineCtx.oncomplete = function(e) {
    // `resampled` contains an AudioBuffer resampled at 16000Hz.
    // use resampled.getChannelData(x) to get an Float32Array for channel x.
    var resampled = e.renderedBuffer;
    var leftFloat32Array = resampled.getChannelData(0);
    // use this float32array to send the samples to the server or whatever
  }
  offlineCtx.startRendering();

在我的例子中，原始重采样 8000 pcm 数据通过这样的 udp 广播传输到 ffmpeg

ffmpeg -fflags nobuffer -analyzeduration 1M -f f32le -ar 8000 -ac 1 -i udp://127.0.0.1:12000 -ar 44100 -ac 2 -f alsa hw:0

所以 websocket 服务器只接收 base64 编码的 pcm 数据，解码 base64 字符串并通过 udp 进行广播。结果在扬声器上由 ffmpeg 播放。

Answer 5

一种更简单的方法是单独调用 resample，它只需要一个输入音频缓冲区、一个输入采样率、一个输出采样率，然后返回输出缓冲区。我发现这个链接可以做到这一点： audio resampling

这很好用（在音频范围内引入的噪音不多..）。感谢作者。