使用 OpenSL 在 android 中进行语音通话答案

【问题标题】：Voice call in android using OpenSL使用 OpenSL 在 android 中进行语音通话
【发布时间】：2013-10-02 19:19:16
【问题描述】：

我正在为我的论文做一个 VoIP 应用程序。我想知道是否有人可以帮助我解决这种情况：我有两个线程，AudioThread 和 AudioSendThread。第一个是通过 DatagramSocket 接收音频数据包并在手机中播放的侦听器。第二个是一个录音机，可以抓取 20 毫秒的声音并将其发送到另一台设备。我已经在 java 中实现了它，但它真的很慢，所以我决定尝试 OpenSL，但我没有找到任何类似这样的文档。

这是音频发送线程

public class AudioSendThread implements Runnable {
private final static String TAG = "AudioSndThread";
private boolean createdAudioP = false;
private DatagramSocket audioSndSocket;
private String ipAddr;
private byte[] buffer;

public AudioSendThread(Object o){
    this.ipAddr = //getting IpAddress
    audioSndSocket = (DatagramSocket)o;
}

@Override
public void run() {
    if(!createdAudioP)
        createdAudioP = createAudioRecorder();
    if(createdAudioP)
        startRecording();
    DatagramPacket packet = null;
    while(true){
            byte[] buffer = readAudio(20); //read 20 milliseconds of audio, this is the one i would like to implement in OpenSL
        try {
            packet = new DatagramPacket(buffer, buffer.length, InetAddress.getByName(this.ipAddr), PORT.AUDIO);
            audioSndSocket.send(packet);
        } catch (IOException e) {
            Log.e(TAG, e.getMessage());
            return;
        }

    }
}

public static native void startRecording();
public static native boolean createAudioRecorder();
public static native byte[] readAudio(int millis);

static {
    System.loadLibrary("SoundUtils");
}}

这就是 AudioThread

public class AudioThread implements Runnable{
private DatagramSocket audioServSock;

@Override
public void run() {
            createBufferQueueAudioPlayer();
    DatagramPacket packet = null;
    Thread audioSndThread = null;
    try {
        this.audioServSock = new DatagramSocket(PORT.AUDIO);
    } catch (SocketException e1) {
        e1.printStackTrace();
    }
    if(true){
        audioSndThread = new Thread(new AudioSendThread(this.audioServSock));
        audioSndThread.start();
    }
            byte[] buffer = new buffer[1500]; //random size
    packet = new DatagramPacket(buffer, 1500);
    while(true){
        try {
            audioServSock.receive(packet);
            playAudio(buffer, packet.getLength()); //other method i would like to implement in OpenSL
        } catch (IOException e) {
            Log.e(TAG, Log.getStackTraceString(e));
            return;
        }           
    }
    at.stop();
    at.release();
}

public static native void createBufferQueueAudioPlayer();
public static native void playAudio(byte[] buffer, int length);

/** Load jni .so on initialization */
static {
     System.loadLibrary("native-audio-jni");
}

}

其他的native方法由NDK的NativeAudio sample采取

感谢大家的建议！

【问题讨论】：

Android NDK 包含一个名为 native-audio 的示例应用程序，它展示了如何使用 OpenSL ES 进行录制和播放。
我知道，我尝试使用此示例，但播放不工作.. 只有 mp3 再现它工作。
这是关于 Android 低延迟流媒体的终极文章：createdigitalmusic.com/2013/05/…
你有没有设法让 OpenSL 记录通话？

标签： android audio voip opensl

【解决方案1】：

您尝试了 Android-NDK 提供的本机音频示例代码，这意味着您熟悉 JNI 调用。这是 Victor Lazzarini 的一篇不错的博客，其中描述了他使用 OpenSL ES 进行语音通信的音频流方法。

Android audio streaming with OpenSL ES and the NDK.

您可以从here.下载源代码按照说明在您的设备中运行它。

【讨论】：