本文へスキップ
snowkitAI

AIの回答を並べて比較

異なるモデル、プロンプト、実行の回答を貼り付けます。どの単語が違うか、それぞれの長さがどれだけか、を正確に確認し、簡単な表でスコアを付けられます。

差分

追加 最初に選んだ回答と比べて削除 元の回答から

長さと類似度

トークン数は単語数と文字数からの推定値で、モデルごとにトークナイザーが少しずつ異なります。

スコア

1〜5など、好きな尺度を使えます。各スコアに重みを掛けて合計します。

回答はこのタブの中にとどまります。

すべてブラウザー内で処理されます。回答はアップロードされません。2、3、4件のAI回答を並べて、どの単語が違うかを正確に確認し、独自の基準でスコアを付けられます。無料で、プライバシーも守られます。

回答の比較方法

  1. 比較する回答の数を選びます:2つ、3つ、4つ。
  2. 各回答を、それぞれのボックスに貼り付けるか、「例を試す」を押します。
  3. 「比較対象」で、出発点とする回答を選びます。
  4. 違いを読みます。追加された単語は緑で表示され、お好みで、削除された単語は取り消し線で表示されます。
  5. 「基準を追加」を押して、正確さやトーンなど、重視する点で各回答を採点し、それぞれの配点を設定します。
  6. 「CSVをダウンロード」を押して、結果を保存します。「すべてクリア」で、最初からやり直します。

回答を比較する理由

モデル、プロンプトの変更、さらには同じ実行の繰り返しでも、答えは変わります。変更された単語に印を付けて並べて読むと、新しいプロンプトが本当に効果的だったか、どのモデルが指示によく従うか、再実行で何が変わったかがすぐにわかります。

違いの表示方法

比較の基準となる回答を1つ選びます。他の回答は、追加された単語が緑で表示され、必要に応じて、省かれた単語が取り消し線で表示されます。類似度は、2つの回答に順序どおり共通する単語の割合です。

公平に比較するコツ

  • 各モデルまたはバージョンに、まったく同じ質問をします。
  • 回答を読む前に、正確さ、わかりやすさ、長さ、トーンなどの基準を決めておきましょう。
  • 仕事にとって最も重要な基準には、より重い重みを付けましょう。
  • 事実はご自身で確認してください。表現が似ていても、その回答が正しいとは限りません。
  • お気に入りを選ぶ前に、いくつか違う質問でテストを繰り返しましょう。

こんな方に

学習の助けを比べる学生、クライアント向けのワークフローを選ぶフリーランサー、プロンプトの変更をテストするチーム向けです。構造化された回答をスキーマと照合するには、AI回答スキーマチェックをご利用ください。

よくある質問

トークン数はどのくらい正確ですか?

文字数と単語数に基づく推定値で、英語ではたいてい1割前後の誤差に収まります。価格については、AIコスト見積もりをご利用ください。

CSVには何が入っていますか?

基準ごとに1行で、その重みと各回答のスコア、続いて加重合計、単語数、推定トークン数が入ります。Excel、Googleスプレッドシート、Numbersで開けます。

5つ以上の回答を比較できますか?

読みやすさを保てるのは、横に並べて4つまでです。それ以上は、同じ最初の回答を基準に何回かに分けて比較し、CSVを保管してください。

テキストは保存されますか?

いいえ。回答はこのタブにだけ残り、閉じると消えます。回答の数と表示オプションの選択は記憶されます。

次はこちら

作ったものを、そのまま端末上で続けましょう。

Snowkitのその他