シングルページ Web アプリの 2 つのバージョンをデプロイしました。1 つのマスター (A) と 1 つのブランチで、ロード時間に何らかの影響を与える可能性のある変更 (B) があります。変更は通常、フロントエンド、リファクタリング、小さなパフォーマンスの最適化などの新機能です。違いはそれほど大きくなく、ロード時間は他の理由 (テスト マシンの負荷、サーバーの負荷、ネットワーク、等）。したがって、webpagetest.org は 9 回試行しても、実際の差 (たとえば、平均で 0.5 秒) よりもはるかに (14 ～ 20 秒の速度指数) 変化します。
基本的に、1 つの数字が必要です。この機能はロード時間を増減します。
そのような違いを測定できるツールはありますか?
私の考えは、最小限の負荷で Webpagetest をサーバーにデプロイし、Webpagetest を両方のバージョンで同時にランダムに実行して、ほとんどのノイズを回避することでした。多くのサンプル (1000 以上) を作成し、平均値 (または中央値) を確認します。
しかし、その作業を始める前に、その問題を解決するサービスがあるかどうかを尋ねたいと思います.