Unityで0.1秒ごとに録音する

Question

前提・実現したいこと・質問内容

マイクから入力された音をフーリエ変換したいのですが、以下のソースコードでは、マイクからの入力を最小で1秒ごとにしか録音できず、変換された結果に1秒のラグが生まれてしまいます。どうにか1秒より短い時間で録音できませんでしょうか？

該当のソースコード

AudioSource aud = GetComponent<AudioSource>();
aud.clip = Microphone.Start(null, true, 1, 44100);
aud.Play();

～～～～～～～～～～～～～～～～～～～～～～～～～～～～～～～～

AudioListener.GetSpectrumData(spectrum, 0, FFTWindow.BlackmanHarris);

補足情報

Unityエンジンを使っています。使用している言語はC#です。

Answer 1

一番忘れてはいけないのは音速です。温度に依存しますがとりあえず340 m/sとしましょう。ミリ秒あたりに直すと34 cm/mili sec.です。1 cm音源が遠ざかるごとに数十マイクロ秒遅延します。まず音源とマイクを近づけることを考えましょう。

---

まあそれはさておき、どの程度の遅延を許容できるのでしょうか？

マイクレベルで物理的に50micro sec程度、更に追加でカーネルレベルで数micro secの遅延が生じます。LinuxやBSDでカーネルレベルのプログラミングをするならここまで目指せるかもしれません

本当にもっとも遅延を減らすならもっとも低レベルのAPIをC++から叩くより他にありません。WindowsならCore Audio APIですね。

数ms程度の遅延を許容できるならWASAPIをC++から叩くことになるでしょう。

50～100ms程度の遅延はUnityでの実現できるようです。

• Unityでのマイク録音３種盛り：レイテンシ比較
• 音データの取り込みについて
• A new proposal for the latency issue on audio recording - Audacity Forum

---

参考までに1秒間を60で割ると17msです。また1秒間を30で割ると34msです。

最終的に結果を多分画面に描画するのでしょうが、描画そのものも数百micro secから数msの遅延があることをお忘れなく。