在 Android 上使用 OpenSL 从内存中播放 PCM WAVE 声音答案

【问题标题】：Playing PCM WAVE sound from memory with OpenSL on Android在 Android 上使用 OpenSL 从内存中播放 PCM WAVE 声音
【发布时间】：2013-10-04 10:39:13
【问题描述】：

我正在尝试设置 OpenSL AudioPlayer 以使用我分配的内存来播放 wav 文件。我想这样做是为了让多个 AudioPlayer 共享相同的数据并节省内存。

我尝试将整个文件提供给 openSL，并告诉它它是带有 format_mime 的 WAVE

 SLDataLocator_Address loc_fd = {SL_DATALOCATOR_ADDRESS, data, size};
SLDataFormat_MIME format_mime = { SL_DATAFORMAT_MIME, (SLchar*)"audio/x-wav",SL_CONTAINERTYPE_WAV};
SLDataSource audioSrc = { &loc_fd, &format_mime };
// configure audio sink
SLDataLocator_OutputMix loc_outmix = { SL_DATALOCATOR_OUTPUTMIX,outputMixObject };
SLDataSink audioSnk = { &loc_outmix, 0 };
// create audio player
const SLInterfaceID ids[2] = { SL_IID_SEEK, SL_IID_PLAYBACKRATE };
const SLboolean req[2] = { SL_BOOLEAN_FALSE, SL_BOOLEAN_FALSE };
result = (*engineEngine)->CreateAudioPlayer(engineEngine,&uriPlayerObject[cntSOUND],&audioSrc, &audioSnk, 0, ids, req);

我自己解析了 WAVE 数据并加载了 format_pcm

SLDataFormat_PCM format_pcm;
format_pcm.formatType = SL_DATAFORMAT_PCM;
char* wavParser = isWAVE(data);
if(wavParser == NULL)
{
    Log("NOT A WAVE!");
    return -1;
}
char* fmtChunk = getChunk("fmt ", data, size);
parsefmtChunk(fmtChunk, &format_pcm);
char* dataChunk = getChunk("data",data, size);
dataChunk += 4;
unsigned int dataSize = *((unsigned int*)dataChunk);
dataChunk += 4;
format_pcm.channelMask = 0;
format_pcm.containerSize = 16;
format_pcm.endianness = SL_BYTEORDER_LITTLEENDIAN;
loc_fd.pAddress = dataChunk;
loc_fd.length = dataSize;

parsefmtChunk函数是

void parsefmtChunk(char* fmtchunk, SLDataFormat_PCM* pcm)
{
char* data = fmtchunk + 8;
unsigned short audioFormat = *((unsigned short*)data);
if(audioFormat != 1)
{
    Log("Not PCM!");
    Log("Reached Line:%d in File %s", __LINE__, __FILE__);
    return;
}
data += 2;
pcm->numChannels = *((unsigned short*)data);
data += 2;
pcm->samplesPerSec = *((unsigned int*)data);
data += 4;
//Byte Rate
data += 4;
//Block Align
data += 2;
//BitsPerSample
pcm->bitsPerSample = *((unsigned short*)data);

（是否应该以某种方式使用字节速率和块对齐来填充 pcm 结构？）

但每当我创建音频播放器时，我都会得到 SL_RESULT_CONTENT_UNSUPPORTED

这是我从我的 parsefmt 函数中记录的内容频道：2 样本每秒：44100 bitsPerSample:16

【问题讨论】：

标签： android c++ android-ndk opensl

【解决方案1】：

你试过了吗？

SLDataFormat_MIME format_mime = {SL_DATAFORMAT_MIME, NULL, SL_CONTAINERTYPE_UNSPECIFIED};

OpenSL ES 的 Android 实现并不完全兼容，http://mobilepearls.com/labs/native-android-api/ndk/docs/opensles/ 建议如下：

OpenSL ES 的 Android 实现要求将 mimeType 初始化为 NULL 或有效的 UTF-8 字符串，并将 containerType 初始化为有效值。在没有其他考虑的情况下，例如对其他实现的可移植性，或无法由标头识别的内容格式，我们建议您将 mimeType 设置为 NULL，将 containerType 设置为 SL_CONTAINERTYPE_UNSPECIFIED。

另外，确保你给它一个有效的 URI。

【讨论】：

不使用 URIs（虽然规范没有提及，但 MIME 也适用于 android 文件描述符）

【解决方案2】：

来自 android-ndk-r8b/docs/opensles/index.html

PCM 数据格式

PCM 数据格式只能用于缓冲队列。

所以 SLDataFormat_PCM 不能像我假设的那样与 SLDataLocator_Address 一起使用。

我可以用缓冲队列做我想做的事，而不是像这样只使用一个大队列

bufferqueueitf->Enqueue(bufferqueueitf,dataChunk,dataSize);

【讨论】：