iOS用のビデオプレーヤーを作成しようとしていますが、オーディオトラックの読み取りが追加されています。私はMPVideoPlayerControllerとAVFoundationのAVPlayerをチェックしていますが、それはすべてちょっと漠然としています。私がやろうとしているのは(ローカルの.mp4から)ビデオを再生することです。映画の再生中に現在のオーディオバッファ/フレームを取得するので、計算やその他の(ビデオ/オーディオに関連しない)アクションを実行できます。現在再生されているオーディオ。これは、ビデオがオーディオトラックとともに再生され続ける必要があることを意味しますが、計算用のライブ生オーディオデータも必要です(つまり、特定の周波数の振幅を取得するなど)。
誰かがこれを行うための例やヒントを持っていますか?もちろん、私はAppleのAV Foundationライブラリのドキュメントをチェックしましたが、それは私にとって十分に明確ではありませんでした。