ruby-on-rails - ページ キャッシュを使用したバニティ A/B テスト

Question

Vanityを使用して A/B テストを行っていますが、実験が実行されているページのページ キャッシュも持っています。そのため、ユーザーがサイト内を移動する際に、実際には両方のオプションが表示されます。私はそれで問題ありませんが、Vanity は 1 人のユーザーがどのオプションを見ているかを追跡し、サイト全体で同じオプションを表示しようとすることを知っています。

だから私が疑問に思っているのは、ユーザーが私のサイトに来てオプションAを表示するとしましょう。バニティ（私は思う）はそれらを「オプションA」の参加者として記録します。そのユーザーがキャッシュされた別のページに移動すると、キャッシュが原因でオプション B が表示され、「コンバージョン」が表示されます。

バニティはそのユーザーを「オプション A」コンバージョンまたは「オプション B」コンバージョンとして記録しますか?

Answer 1

最近、Vanity のメンテナンスを手伝い始めました。

この質問は、最近PR#144によって対処され、クローズされた、ここで報告された問題に似ています(master にマージされたばかりで、次のリリースに含まれる予定です)。

ユーザーのキャッシュ文字列は、(コントローラーから) 以下を使用して生成できます。

Vanity.playground.participant_info(vanity_identity)

Answer 2

Vanity の作成者と話をしましたが、正確な結果を得るには、A/B テストを行うページのキャッシュをオフにすることが重要です。