問題タブ [precision-recall]

私は現在情報検索を学んでおり、リコールと精度の例にかなりこだわっています

検索者は、検索エンジンを使用して情報を探します。結果の最初の画面には 10 個のドキュメントがあり、2 番目の画面には 10 個のドキュメントがあります。

検索エンジンのインデックスに 10 件の関連ドキュメントがあることがわかっていると仮定します。

そう... 20 件の検索があり、そのうち 10 件が関連しています。

誰かがこれを理解するのを手伝ってくれますか?

ありがとう

matlab の分類子の精度と再現率の計算に問題があります。私は fisherIris データ (150 個のデータポイント、50 個の setosa、50 個の versicolor、50 個の virginica で構成される) を使用します。kNNアルゴリズムを使用して分類しました。ここに私の混同行列があります：

正解率は96%(144/150)ですが、matlabを使って精度と再現率を計算する方法、機能はありますか? その精度= tp /（tp + fp）、および再現率= tp /（tp + fn）の式は知っていますが、コンポーネントを特定するのに迷っています。たとえば、真陽性はマトリックスから 144 であると言えますか? 偽陽性と偽陰性はどうですか？助けてください！！！本当に感謝します！ありがとうございました！

Rのマルチクラス分類タスクの精度、F1、リコールを計算するために使用できる推奨パッケージはありますか? ROCRを使用しようとしましたが、次のように述べています:

精度と再現率の両方の方程式を理解しています。この質問と、各 TP、TN、FP、FN の数値を計算する方法について混乱しています。

情報検索システムは、8 つの関連ドキュメントと 10 の非関連ドキュメントを返します。コレクションには合計 20 の関連ドキュメントがあります。この検索で​​のシステムの精度、再現率、F 値は?

助けてください、ありがとう！

基本的に、単語の語彙の品詞に基づいて文書を分類するためのアプリケーションを実行する必要がありました。分類問題を学習するために使用されたアルゴリズムは、既製のものであり、私に渡されました。得られた例に基づいて、これらの結果 (精度、再現率、精度) を解釈する必要があります。これらの結果が良いかどうか、誰かが彼の意見を言うことができますか?

私はWEKAと高度な統計に不慣れで、WEKAの測定値を理解するためにゼロから始めています。私はすべての @rushdi-shams の例を実行しました。これは優れたリソースです。

ウィキペディアのhttp://en.wikipedia.org/wiki/Precision_and_recallの例では、9 匹の実際の犬と何匹かの猫のグループで 7 匹の犬を検出するビデオ ソフトウェア認識に関する簡単な例を説明しています。例と再現率の計算を完全に理解しています。最初のステップとして、Weka でこのデータをどのように再現するかを見てみましょう。このような .ARFF ファイルを作成するにはどうすればよいですか? このファイルでは、間違った混同行列があり、クラス リコールによる間違った精度が 1 ではなく、4/9 (0.4444) である必要があります。

出力 Weka (フィルターなし)

=== 運行情報 ===

偽陰性の犬に何か問題があるに違いありませんか、それとも私の ARFF アプローチが完全に間違っていて、別の種類の属性が必要ですか?

ありがとう