問題タブ [benchmarking]

機械学習ベンチマークのどのリポジトリを知っていますか?

プログラムの一部のロード ルーチンは、完了するまでに時間がかかります。関数の実行にかかった時間を確認するための簡単な小さなスニペットが必要です。小さいとは、「できればサードパーティのライブラリがない」ことを意味します。

システム時間を取るのと同じくらい簡単なことでしょうか？

編集:問題のターゲット OS は Windows です。

効率を測定しようとしているスクリプトを作成しようとしています。いくつか質問があります:-

1. 小規模なアプリケーションの場合、この種のプロファイリングは必要ですか? それとも私は妄想的になっていますか？(ほとんどのコードが適切に効率的である/無限ループがないことを前提としています)
2. これを何に対してベンチマークする必要がありますか？何と比較すればよいですか？
3. 以下は、ab から取得した効率出力です。このやり方はずれすぎですか？このアプリの設計は間違った方向に向かっていますか? 注意すべき警告信号はありますか?

PHPを使用してスクリプトを記述しています。さらにテストしたところ、PHP スクリプトから MySQL 接続部分をコメントすると、「失敗したリクエスト」が 0 になることもわかりました。どうしたの？この失敗率を下げるにはどうすればよいですか?

ありがとう、アレック

ネットワーク自体が非常に遅い環境に Subversion リポジトリをインストールする予定です。そこで使用されていた以前の VCS は VSS であり、それを使用するのは悪夢でした (その「機能」のためだけではありません)。

私の質問は、Svnserve と apache モジュールのどちらを選択するかです。ステートレス プロトコルが原因で apache モジュールが遅くなることはわかっていますが、それが意味する時間の増加がどの程度かはわかりません。
2 つのサーバー間の速度の平均差を示すベンチマークまたはルールはどこかにありますか?

Java で正しいマイクロベンチマークを作成 (および実行) するにはどうすればよいですか?

考えるべきさまざまなことを示すコードサンプルとコメントを探しています。

例: ベンチマークは時間/反復または反復/時間を測定する必要がありますか? その理由は?

関連:ストップウォッチのベンチマークは許容されますか?

私は使用しなければならないことを知っています：rdtsc。測定された関数は決定論的ですが、結果は再現可能にはほど遠いです（実行ごとに5％の振動が発生します）。考えられる原因は次のとおりです。

• コンテキストスイッチング
• キャッシュミス

他の原因を知っていますか？それらを排除する方法は？

XenServer と ESX を公平に比較​​しようとしていますが、比較したいのは複数の VM でのパフォーマンスです。VM のパフォーマンスを公平にベンチマークする方法を知っている人はいますか?

各サーバーで固定数 (たとえば 8) の XP/Vista VM を実行し、負荷がかかったときに各 VM がどれだけ速く動作するかをある程度測定したいと考えています。理想的には、1 つの側面だけでなく、システム全体 (CPU/メモリ/ディスク/ネットワーク) のベンチマークが必要です。

これは実際には非常にトリッキーなことであり、意味のある結果を得ることができるので、提案に感謝します!

また、公開されている既存のレポートや比較も見たいと思います (ベンダーの偏見ではなく、独立したものが望ましいです!)。

オンラインで行列の乗算/反転のベンチマークを見つけようとしています。私のC++実装は、現在38秒で100 x 100のマトリックスを反転できますが、私が見つけたこのベンチマークと比較すると、私の実装のパフォーマンスは本当にひどいものです。それが超最適化されたものなのか、それとも実際に200 x 200の行列を約0.11秒で簡単に反転できるのかわからないので、結果を比較するためのベンチマークをもっと探しています。あなたはいくつかの良いリンクを神にしていますか？

更新 乗算コードにバグを見つけました。これは結果には影響しませんでしたが、無駄なサイクルの無駄を引き起こしていました。今、私の反転は20秒で実行されます。まだまだ時間がかかりますので、どんなアイデアでも大歓迎です。

皆さんありがとうございます

スタックを備えたSunハードウェアで実行されているJ2EEWebアプリケーションがありOpenSolaris/Glassfishます。後でスケーラビリティ要件に備えるために、パフォーマンスベンチマークテストを開始しています。

ガイドライン/ベストプラクティスは非常に役立ちます。

当社が開発しているウェブサイトのベンチマークを行いたいと考えています。複数の Web サーバーとバックエンド サーバーで構成されます。

大量のリクエストを適切にシミュレートできるようにするために、開発マシン (約 15 Xp/Vista) といくつかの予備の Red Hat サーバーをベンチマーク クライアントとして使用することを考えていました。

これらのマシンをスレーブ/クライアントとして設定し、それらを制御して組み合わせたベンチマークを実行し、集計結果を取得できるツールはありますか?

ベンチマークは、通常のユーザーがログインしていくつかのページを閲覧することをシミュレートすることで構成されます。