問題タブ [precision-recall]

私はしばらくRを使用していないので、まだ慣れていないかもしれませんが、.. 2つの列を持つRのテーブルがあり、最初のテーブルには予測値があります（値は0または1のいずれかです）。 ）、2番目の値には実際の値（これも0または1）があります。再現率、適合率、適合率を見つける必要がありますが、Rで適切な関数を見つけることができません（ROCRについても読みましたが、いくつかのプロットを作成することしかできませんでしたが、実際にはプロットは必要ありません。数字が必要です）。

Rの適合率、再現率、f値を見つけるための優れた関数はありますか？それを行うためのさまざまな方法はありますか？

誰かがFメジャーをまとめて計算するのを手伝ってもらえますか？再現率と適合率を計算する方法は知っていますが、特定のアルゴリズムについて1つのF値を計算する方法がわかりません。

例として、私のアルゴリズムがm個のクラスターを作成するとしますが、同じデータに対してn個のクラスターがあることを知っています（別のベンチマークアルゴリズムによって作成されたもの）。

1つのpdfを見つけましたが、取得した集合値が1より大きいため、役に立ちません。pdfの参照はFメジャーで説明されています。具体的には、著者がFメジャーに基づいて2つのアルゴリズムを比較し、0から1までの値をまとめて取得したいくつかの研究論文を読みました。上記のpdfを注意深く読むと、式はF（C、K）です。 = ∑ | ci | / N * max {F（ci、kj）}
ここで、ciは参照クラスターであり、kjは他のアルゴリズムによって作成されたクラスターです。ここで、iは1からnまで実行され、jは1からmまで実行されます。| c1 |=218としましょう。ここでは、pdf N = m * nに従って、m=12およびn=10とすると、j = 2に対して最大F（c1、kj）が得られます。確かにF（c1、k2）は0から1の間ですが、上記の式で計算された結果の値は1を超える値になります。

私の分類システムは、画像のどのカテゴリに属する​​かをユーザーに伝える3つの出力を生成します。カテゴリは、A、B、Cとしましょう。マトリックスの例を次に示します。

この場合、真陽性、真陰性、偽陽性、偽陰性をどのように適用できるかわからないため、適合率= tp / tp+fpおよび再現率=tp/ tp+fnの式と少し混乱しています。

誰かがこれを支援できますか？あなたの助けは大歓迎です。ありがとうございました。

NB 分類子を使用して、教師あり機械学習アルゴリズムで精度と再現率を計算する方法について本当に混乱しています

たとえば、
1) 2 つのクラス A、Bがある
2) 10000 個のドキュメントがあり、そのうち 2000 個がトレーニング サンプル セットに使用されます (クラス A=1000、クラス B=1000)
3)上記のトレーニング サンプル セットに基づいて残りを分類しますNB 分類器を使用した 8000 文書
4)分類後、5000 文書がクラス A に、3000 文書がクラス B に分類されます
5)さて、Precision と Recall をどのように計算しますか?

私を助けてください..

ありがとう

ベイズ分類器などの分類器のリコールの意味は何ですか？例を挙げてください。

たとえば、Precision=テストデータの正しい/正しい+間違ったドキュメント。リコールを理解する方法は？

加重メトリックのセットに基づいて、アイテムに類似した最初の 10 個のアイテムを推奨するレコメンダー システムを構築しました。現在できることは、アイテムを選択することだけで、システムは選択したアイテムに類似する最初の 10 個のアイテムを表示します。このようなシステムを評価するために使用できる評価手法について、私は混乱しています。精度/再現率の推定は、ユーザーが関与していないような場合に意味がありますか? このようなシステムの評価手法に関する指針をいただければ幸いです。

2つ以上のクラスの精度と再現率を計算するのを手伝ってくれる人はいますか? インターネットでグーグル検索しているときに、次のヘルプの完全な URL を見つけました

精度と再現率を計算する

上記の URL で NB 分類器を使用してまったく同じものを利用したいのですが、2 つ以上のクラスの精度と再現率が必要です。

私を助けてください

ありがとうございました