👩‍💻評価と調整

モデルのトレーニングが完了した後、モデルの推論結果を評価し、パフォーマンスを向上させる

推論結果は、ダッシュボードとインファレンス(推論)ページの両方で確認することができます。推論結果を表示するUIフォームは、各モデル(API) ごとに若干異なります。

モデルの推論結果を確認し、修正(Ground Truth 入力)するプロセスは、NER(固有表現抽出)、レビュー分析、ツリー分類の3つの代表的なAPIモデルを通じて以下で説明します。

固有表現抽出(NER)

モデルの学習が完了した後、モデルの推論結果はダッシュボードとインファレンス(推論)ページの両方に表示されます。推論結果を出力するUIフォームは、モデル(API)ごとに若干異なります。

ダッシュボード(Dashboard)

テキスト分類や感情分析とは異なり、ダッシュボードメニューではフレーズの列で推論結果を修正することができます。キーワードをドラッグして新しい固有表現を作成したり、既存の固有表現にマウスオーバーして表示される✖️アイコンをクリックして削除できます。

ダッシュボードメニューで、フレーズの列に修正がある場合は修正された結果が表示されます。つまり、表の各フレーズは元の推論結果または修正された結果のいずれかになります。修正後も元の結果を確認したい場合は、ステータス列のステータスをクリックします。

推論 (Inference)

インファレンス(推論)メニューでは、修正の有無に関係なく、常に元の推論結果が表示されます。Diff列の感嘆符をクリックすると、推論結果や手動で修正したものの詳細情報を確認できます。推論結果が確認後の内容と一致している場合、感嘆符は青色に表示され、一致していない場合は赤色に表示されます。

レビュー分析 (Review Analysis)

ダッシュボードメニューとインファレンス(推論)メニューの両方で推論結果を確認できます。ダッシュボードメニューのレビュー列とインファレンス(推論)メニューの推論列を確認してください。レビュー変換ダッシュボードには、別のステータス列はありませんので、ご注意ください。

ダッシュボード(Dashboard)

ダッシュボードメニューでは、推論結果を確認し、修正することができます。+ボタンをクリックして新しいレビューを追加したり、既存のレビューのスコアを変更したりできます。-2から2以外の評価を追加するには、+ボタンをクリックし、「センチメント」フィールドに数値を入力して、フレーズのトレーニングトグルをオンにして新しいモデルをトレーニングします。レビュー上の️️✖️アイコンをクリックすることで、既存のレビューを削除することもできます。

フレーズの列では、推論結果の基となるカテゴリ別のキーワードを確認できます。目の形をしたアイコンをクリックすることで、カテゴリ別のキーワードを詳細に確認できます。

推論 (Inference)

インファレンス(推論)メニューページでは、修正された結果と元の推論結果の両方を表で確認できます。修正された結果は、Tagged列に赤い文字で修正が行われたものがあり、元の推論結果はインファレンス(推論)列にあります。

ツリー分類 (Tree Classification)

ダッシュボードメニューとインファレンス(推論)メニューの両方で推論結果を確認できます。ダッシュボードメニューのカテゴリ列とインファレンス(推論)メニューの推論列を確認してください。

ツリー分類ダッシュボードには、別のステータス列はありませんので、ご注意ください。

ダッシュボード(Dashboard)

ダッシュボードメニューでは、推論結果を確認し、修正することができます。既存のカテゴリをクリックして編集し、推論結果を変更します。別のカテゴリを追加するには、+ボタンをクリックして、希望するカテゴリと値を入力し、フレーズのトレーニングトグルをオンにして新しいモデルをトレーニングします。また、隣にある️✖️アイコンをクリックして既存のカテゴリを削除することもできます。

既存のカテゴリをクリックして編集し、値を割り当てたり推論された値を修正します。終了したら「送信」をクリックしてください。

推論 (Inference)

インファレンス(推論)メニューでは、修正された結果と元の推論結果の両方を表で確認できます。修正された結果は、Tagged列に赤い文字で修正が行われたものがあり、元の推論結果は推論列にあります。

Last updated