Android AEC 不会生成有用的声音

Question

我正在为 VoIP 应用程序进行一些声学回声消除实验，声音让我抓狂。我想做的很简单：我之前已经录制过声音。现在我将播放该声音，并在播放时录制另一个声音，这是全双工 VoIP 场景的真实情况。我使用 MedaiPlayer 来播放声音，使用 MediaRecorder 来录制新声音。下面是该类的完整代码，修改自 Android SoundRecorder Sample。重要的一点是， mPlayer.setAudioStreamType(AudioManager.MODE_IN_COMMUNICATION); 对于 Android 文档，“在通信音频模式下。建立音频/视频聊天或 VoIP 呼叫。”和 mRecorder.setAudioSource(MediaRecorder.AudioSource.VOICE_COMMUNICATION); 对于 Android 文档，“针对 VoIP 等语音通信进行调整的麦克风音频源。例如，它将利用回声消除或自动增益控制（如果可用）。如果不应用语音处理，则其行为类似于默认值。”这是非常有希望的。 但如果我播放扬声器发出的任何声音，我几乎什么也录不到，或者只录到奇怪的声音。由于我是这里的新用户，所以无法附加录音的声波，但第一个是正常的录音，具有正常的声波。第二次录音是在播放第一次录音的同时进行录音，几乎没有任何内容，没有声波。如果扬声器有任何活动，Android 似乎会关闭麦克风。我尝试了 MediaRecorder 和 MediaPlayer 的不同可能性，但没有用。在 Android 中实现回声消除的正确方法是什么？我在Sony Tablet S上试用并使用Android 3.0 SDK进行开发。 提前致谢。

package com.kadir.sample;
import android.app.Activity;
import android.widget.LinearLayout;
import android.widget.Toast;
import android.os.Bundle;
import android.os.Environment;
import android.view.ViewGroup;
import android.widget.Button;
import android.view.View;
import android.content.Context;
import android.util.Log;
import android.media.AudioManager;
import android.media.MediaRecorder;
import android.media.MediaPlayer;

import java.io.IOException;


public class AudioRecordTest extends Activity
{
    private static final String LOG_TAG = "AudioRecordTest";
    private static String mFileName = null;
    private static String mFileNameConst = null;

    private RecordButton mRecordButton = null;
    private MediaRecorder mRecorder = null;

    private PlayButton   mPlayButton = null;
    private MediaPlayer   mPlayer = null;
    private PlayConstButton mPlayConstButton = null;

    private void onRecord(boolean start) {
        if (start) {
            startRecording();
        } else {
            stopRecording();
        }
    }

    private void onPlay(boolean start) {
        if (start) {
            startPlaying();
        } else {
            stopPlaying();
        }
    }

    private void onPlayConst(boolean start) {
        if (start) {
            startConstPlaying();
        } else {
            stopConstPlaying();
        }
    }

    private void startPlaying() {
        mPlayer = new MediaPlayer();
        try {
            mPlayer.setDataSource(mFileName);
            mPlayer.prepare();
            mPlayer.start();
        } catch (IOException e) {
            Toast.makeText(this, "prepare() failed", Toast.LENGTH_LONG).show();
            Log.e(LOG_TAG, "prepare() failed");
        }
    }

    private void stopPlaying() {
        mPlayer.release();
        mPlayer = null;
    }

    private void startConstPlaying() {
        mPlayer = new MediaPlayer();
        try {
            mPlayer.setDataSource(mFileNameConst);
            mPlayer.setAudioStreamType(AudioManager.MODE_IN_COMMUNICATION);
            mPlayer.prepare();
            mPlayer.start();
        } catch (IOException e) {
            Toast.makeText(this, "prepare() failed", Toast.LENGTH_LONG).show();
            Log.e(LOG_TAG, "prepare() failed");
    }
}

private void stopConstPlaying() {
        mPlayer.release();
        mPlayer = null;
    }

    private void startRecording() {
        mRecorder = new MediaRecorder();
        mRecorder.setAudioSource(MediaRecorder.AudioSource.VOICE_COMMUNICATION);
        mRecorder.setOutputFormat(MediaRecorder.OutputFormat.THREE_GPP);
        mRecorder.setOutputFile(mFileName);
        mRecorder.setAudioEncoder(MediaRecorder.AudioEncoder.AMR_NB);

        try {
            mRecorder.prepare();
        } catch (IOException e) {
            Toast.makeText(this, "startRecording() failed", Toast.LENGTH_LONG).show();
            Log.e(LOG_TAG, "prepare() failed");
        }

        mRecorder.start();
    }

    private void stopRecording() {
        mRecorder.stop();
        mRecorder.release();
        mRecorder = null;
    }

    class RecordButton extends Button {
        boolean mStartRecording = true;

        OnClickListener clicker = new OnClickListener() {
            public void onClick(View v) {
                onRecord(mStartRecording);
                if (mStartRecording) {
                    setText("Stop recording");
                } else {
                    setText("Start recording");
                }
                mStartRecording = !mStartRecording;
            }
        };

        public RecordButton(Context ctx) {
            super(ctx);
            setText("Start recording");
            setOnClickListener(clicker);
        }
    }

    class PlayButton extends Button {
        boolean mStartPlaying = true;

        OnClickListener clicker = new OnClickListener() {
            public void onClick(View v) {
                onPlay(mStartPlaying);
                if (mStartPlaying) {
                    setText("Stop playing");
                } else {
                    setText("Start playing");
                }
                mStartPlaying = !mStartPlaying;
            }
        };

        public PlayButton(Context ctx) {
            super(ctx);
            setText("Start playing");
            setOnClickListener(clicker);
        }
    }

    class PlayConstButton extends Button {
        boolean mStartPlaying = true;

        OnClickListener clicker = new OnClickListener() {
            public void onClick(View v) {
                onPlayConst(mStartPlaying);
                if (mStartPlaying) {
                    setText("Stop Constant playing");
                } else {
                    setText("Start Constant playing");
                }
                mStartPlaying = !mStartPlaying;
            }
        };

        public PlayConstButton(Context ctx) {
            super(ctx);
            setText("Start Constant playing");
            setOnClickListener(clicker);
        }
    }

    public AudioRecordTest() {
        mFileName = Environment.getExternalStorageDirectory().getAbsolutePath();
        mFileName += "/audiorecordtest.3gp";
        mFileNameConst = Environment.getExternalStorageDirectory().getAbsolutePath();
        mFileNameConst += "/constant.3gp";
    }

    @Override
    public void onCreate(Bundle icicle) {
        super.onCreate(icicle);

        LinearLayout ll = new LinearLayout(this);
        mRecordButton = new RecordButton(this);
        ll.addView(mRecordButton,
            new LinearLayout.LayoutParams(
                ViewGroup.LayoutParams.WRAP_CONTENT,
                ViewGroup.LayoutParams.WRAP_CONTENT,
                0));
        mPlayButton = new PlayButton(this);
        ll.addView(mPlayButton,
            new LinearLayout.LayoutParams(
                ViewGroup.LayoutParams.WRAP_CONTENT,
                ViewGroup.LayoutParams.WRAP_CONTENT,
                0));
        mPlayConstButton = new PlayConstButton(this);
        ll.addView(mPlayConstButton,
            new LinearLayout.LayoutParams(
                ViewGroup.LayoutParams.WRAP_CONTENT,
                ViewGroup.LayoutParams.WRAP_CONTENT,
                0));
        setContentView(ll);
    }

    @Override
    public void onPause() {
        super.onPause();
        if (mRecorder != null) {
            mRecorder.release();
            mRecorder = null;
        }

        if (mPlayer != null) {
            mPlayer.release();
            mPlayer = null;
        }
    }
}

更新： 我进行了一些研发，如下： 我更改 MediaRecorder 和 MediaPlayer 参数。对于每个值，我都会自己录制，并且在录制过程中，我开始了另一场比赛。然后完成录音并听我刚刚录制的内容。对于 MediaRecorder，我尝试了这些值： MediaRecorder.AudioSource.DEFAULT、MediaRecorder.AudioSource.MIC、MediaRecorder.AudioSource.VOICE_CALL、MediaRecorder.AudioSource.VOICE_COMMUNICATION、MediaRecorder.AudioSource.VOICE_DOWNLINK、MediaRecorder.AudioSource.VOICE_RECOGNITION、MediaRecorder.AudioSource.VOICE_UPLINK 对于 MediaPlayer，我尝试了这些值： AudioManager.MODE_NORMAL、AudioManager.MODE_CURRENT、AudioManager.MODE_IN_CALL、AudioManager.MODE_IN_COMMUNICATION、 AudioManager.STREAM_VOICE_CALL，AudioManager.STREAM_MUSIC。 但无论我尝试什么，我总是要么沉默，要么纯粹的噪音。我认为 MediaRecorder 和 MediaPlayer 类不足以用于 VoIP。 Android 的声音系统对于我这样的初学者来说有点奇怪。

Answer 1

我部分明白了。我使用的是搭载 Android 3.2 的索尼 Tablet S。我在装有 Android 2.3 的 Archos 70 上尝试了相同的程序。当我在演奏另一个东西的同时录制一个东西时，两种声音都会被记录下来。这意味着我有一个可以应用 AEC 的声音。在索尼，录音只不过是噪音。现在有两种可能性：要么是 Sony Tablet S 的麦克风实现有问题（顺便说一句，GTalk 在 Sony 上运行得很好，但在 Android 中实现可能有些特殊），要么是 Android 3.2 的麦克风实现有问题。

Answer 2

Android 中的回声消除在很多情况下效果不佳。我认为这与回声尾较长有关。我知道有第三方算法可以解决这个问题。谷歌搜索回声消除软件并验证该软件是否支持长回声尾。

Answer 3

为什么将 MediaRecorder 用于流应用程序？请改用 AudioRecorder。

我目前正在使用类似的用例，并且 AudioRecorder 工作完美。