VoIP 機能を備えた Android Unity アプリの開発中に、一部のデバイス (具体的には Galaxy S6) でマイクがスピーカーから出力された音を拾い、多くの静電気、歪み、エコーが発生することを発見しました。このため、私は Android の AEC および NS 機能の一部を活用するためのネイティブ ソリューションに取り組み始めました。
Note 4 などの一部のデバイスで完全に動作する次のテストベッドを作成しました。Galaxy S6 で同じアプリを実行すると、ARC と NS がうまく適用されていないか、まったく適用されていないように見えます。
public class MainActivity extends Activity
{
private AudioRecord mAudioRecorder = null;
private AudioTrack mStreamingPlayer = null;
private Thread playbackThread = null;
private boolean useVoip = true;
int bufferSize;
int chunkSize;
private AutomaticGainControl agc;
private NoiseSuppressor suppressor;
private AcousticEchoCanceler aec;
private boolean manuallyAttachEffects = false;
private void StartRecordingAudio()
{
int sampleRate = 44100;
int channelConfig = AudioFormat.CHANNEL_IN_MONO;
int audioFormat = AudioFormat.ENCODING_PCM_16BIT;
chunkSize = AudioRecord.getMinBufferSize(sampleRate, channelConfig, audioFormat);
bufferSize = chunkSize * 10;
int audioSource = MediaRecorder.AudioSource.MIC;
if ( useVoip && !manuallyAttachEffects )
{
audioSource = MediaRecorder.AudioSource.VOICE_COMMUNICATION;
}
mAudioRecorder = new AudioRecord( audioSource,
sampleRate,
channelConfig,
audioFormat,
bufferSize );
if ( useVoip && manuallyAttachEffects )
{
SetupVoipEffects( mAudioRecorder.getAudioSessionId() );
}
mAudioRecorder.startRecording();
mStreamingPlayer = new AudioTrack( AudioManager.STREAM_MUSIC,
sampleRate,
AudioFormat.CHANNEL_OUT_MONO,
audioFormat,
bufferSize,
AudioTrack.MODE_STREAM );
mStreamingPlayer.play();
playbackThread = new Thread(new Runnable()
{
@Override
public void run() {
readAudioData();
}
});
playbackThread.start();
}
private void readAudioData()
{
Thread thisThread = Thread.currentThread();
byte[] buffer = new byte[chunkSize];
while ( !thisThread.isInterrupted() )
{
if ( mAudioRecorder == null )
break;
int bytesRead = mAudioRecorder.read(buffer, 0, chunkSize);
if ( bytesRead > 0 )
{
if ( mStreamingPlayer == null )
break;
mStreamingPlayer.write(buffer, 0, chunkSize);
}
}
}
private void SetupVoipEffects( int sessionId )
{
if(AutomaticGainControl.isAvailable())
{
agc = AutomaticGainControl.create( sessionId );
Log.d(LOG_TAG, "AGC is " + (agc.getEnabled()?"enabled":"disabled"));
if ( !agc.getEnabled() )
{
agc.setEnabled(true);
Log.d(LOG_TAG, "AGC is " + (agc.getEnabled()?"enabled":"disabled" +" after trying to enable"));
}
}
if(NoiseSuppressor.isAvailable())
{
suppressor = NoiseSuppressor.create( sessionId );
Log.d(LOG_TAG, "NS is " + (suppressor.getEnabled()?"enabled":"disabled"));
if ( !suppressor.getEnabled() )
{
suppressor.setEnabled(true);
Log.d(LOG_TAG, "NS is " + (suppressor.getEnabled()?"enabled":"disabled" +" after trying to disable"));
}
}
if(AcousticEchoCanceler.isAvailable())
{
aec = AcousticEchoCanceler.create( sessionId );
Log.d(LOG_TAG, "AEC is " + (aec.getEnabled()?"enabled":"disabled"));
if ( !aec.getEnabled() )
{
aec.setEnabled(true);
Log.d(LOG_TAG, "AEC is " + (aec.getEnabled()?"enabled":"disabled" +" after trying to disable"));
}
}
}
}
AudioRecord に VOICE_COMMUNICATION を使用する、MIC を使用して NoiseSuppressor と AcousticEchoCanceller を手動で作成する、NuPlayer/AwesomePlayer を無効化/有効化するなど、多くのことを試しました。デバイスは、AEC がサポートされ、有効になっていることを示していますが、実際には起こっていないようです。ヘッドフォンを使用するか、スピーカーフォンの代わりにハンドセットを使用すると、問題は完全に解消されます (マイクがスピーカーの音を拾うことができません)。ここで何か巨大なものを見落としているのでしょうか、それともバグが報告される可能性はありますか?
AEC と NS が他のデバイスで完全に機能していなくても、疑いはありません。