# 生成した回答へフィードバックを与える Alliの[回答生成ノード](https://docs.allganize.ai/alli-llm-app-market/app-management/node/generative-answer)はダッシュボードへ登録されたドキュメントやQ\&Aなど様々なソースを元に回答を生成します。回答を生成するにあたって、質問に対して誤ったドキュメントソースから回答を生成しないよう、ソースとなったドキュメントにフィードバックを与えることで、精度を高めるため方法を案内します。\ このフィードバックは、エージェントがダッシュボード内でのみ付与することが可能です。また、**回答生成ノード（グループプロンプトまたはRag Agent）によって生成された回答結果に対応しております**。まずは、会話履歴のメニューを開き、対象となる会話履歴を開きます。\ 会話の中でフィードバックを与えたい回答を確認します。 ## 会話履歴から生成した回答へフィードバックを与える

回答が表示された吹き出しの下部には 1. 手がかりのフィードバック 2. 3.👍 や👎ボタンを使用すると、回答に対する調節的なフィードバックを提供できます。 "手がかりのフィードバックボタン"をクリックすると、下記の詳細ページに遷移します。

1. ユーザーの質問と生成された回答を確認できます 2. 回答の根拠となったドキュメント名、ページ情報が表示されます。ただし、ナレッジベース>ドキュメントタブからドキュメントを削除した場合、そのリストからドキュメントも無効化処理（削除されたドキュメントとして表示）されます。 3. 表示されたページ以外に同じドキュメント内の特定のページに正解が含まれている場合には、ページナビゲーションを通じて特定のページに自由に移動し、「質問に関連する内容」フィードバックを付与することができます。 4. 回答を生成したページが回答の根拠として適切であれば「質問に関連した内容」 👍 フィードバックボタンをクリックし、評価します。 5. 全く関係のない内容を根拠としていた場合は、「質問と無関係な内容」 👎 フィードバックボタンをクリックします。 {% hint style="info" %} **👍 フィードバックを付与した場合には、今後同一または類似の質問に対して該当ページが上位にランクして表示されます。**\ **（**今後同一または類似の質問が行われた際に、回答根拠に含まれやすくなります）\ \ **👎 フィードバックを付与した場合には、当該ページは回答根拠の候補から除外されます。**\ **※フィードバックは、回数集計処理ではなく、最後に付与された最新のエージェントフィードバックで上書きされます。** {% endhint %} 6. 左側のリストに回答に基づく文書がない場合は、直接ナレッジベースから対象のドキュメントを追加してフィードバックを与えることができます。

　　　ドキュメントを選択した後は、"回答の根拠となったページが指定されていないドキュメント"というセクションで登録されるので、回答が記載されているページを表示したのち、"**👍** 質問と関連する内容"に評価してご利用ください。

さらに、ドキュメントリストのアイコンにマウスオーバーすると、最後にフィードバックを与えたエージェント情報と時間を一緒に確認できます。 ## フィードバックの履歴全体を確認/管理するまた、以下の画像の通り、フィードバック履歴全体を確認する方法もあります。

ナレッジベース＞フィードバック管理タブで、質問と回答についてどのフィードバックがドキュメントのどのページに付与されたか、一覧を確認できます。 1. 実際の会話で行われたユーザーが入力した質問と生成された回答内容です 2. フィードバックの詳細概要を確認できます。

　2-1. ユーザーが付与したフィードバックとは、実際の会話でユーザーによって評価されたフィードバックを意味します。　2-2. 管理画面にログインできるメンバーによって付与したフィードバック（回答の根拠に対する評価）は会話履歴画面で実施した管理画面にログインできるメンバーによって評価されたフィードバックを意味します。 {% hint style="info" %} **👍 フィードバックを付与した場合には、今後同一または類似の質問に対して該当ページが上位にランクして表示されます。**\ **（**今後同一または類似の質問が行われた際に、回答根拠に含まれやすくなります）\ \ **👎 フィードバックを付与した場合には、当該ページは回答根拠の候補から除外されます。**\ **※フィードバックは、回数集計処理ではなく、最後に付与された最新のエージェントフィードバックで上書きされます。** {% endhint %} 3. 管理画面にログインできるメンバーのフィードバックが付与された文書と文書ページが表示されます。ボタンをクリックすると、回答根拠文書の詳細を確認できます。 4. 表示された回答とフィードバックの内容が正しいかどうかを評価できます。\ \ **お客様の環境設定によっては確認済（正確）を押した設問が類似質問の回答根拠として登録される場合がございます。挙動の不明点は担当のカスタマーサクセスまでお問い合わせください。**
5. 表示された回答とフィードバックの内容が正しいかどうかを評価し、どの部分の改善が必要かを評価できます。クリックすると、以下のポップアップが表示されます。

\ **お客様の環境設定によっては確認済（不正確）をクリックし、上記フォームに入力された内容が類似質問の回答根拠として登録される場合がございます。挙動の不明点は担当のカスタマーサクセスまでお問合せください。**
6. フィードバックリストのダウンロードボタンです。フィルターを適用した後にダウンロードすると、フィルターが適用されたリストのみがダウンロードされます。 1. ダウンロードしたシートの\[App Name]の列にはフィードバックが発生したアプリ・スキル名が記載されます。 2. アプリ名は会話履歴に基づき取得されます。そのため削除されたアプリの場合は、アプリ名が(Deleted)と表示されます。 3. \[Created At]の列には、メンバーや管理者がフィードバックが送信さした時刻が記載されます。 4. 会話履歴は3か月間、フィードバックは無期限で保存されるため、3か月以前のフィードバックをダウンロードする場合、アプリ名は空欄になります。 7. 「回答の根拠となったドキュメントのフィードバックをアップロード」からExcelファイルに基づいて一括してフィードバックデータをアップロードすることも可能です。

サンプルファイルをダウンロード後、フォーマットに合わせて①質問文、②回答が含まれているファイル名(拡張子含む)、③ページ番号を入力し、アップロードください。この際に、ファイル名が誤っているか、ページ番号がない場合はその行はスキップされてアップロードされます。

本ガイドの内容に基づいて、生成された回答に使用されたファイルを確認、フィードバックを与えることによって、回答の生成品質を安定させることができます。 {% hint style="info" %} {% endhint %}