メトリクス

Line プラットフォームには、開発フェーズおよび本番環境の両方でエージェントのパフォーマンスを評価するための一連のツールが含まれています。エージェントを評価するためのメトリクスをどのように定義するかは、完全にあなたが制御できます。

​

システムメトリクス

デフォルトでは、Line エージェントが行うすべての通話について、パフォーマンス評価に役立つ一連のシステムメトリクスが自動的に計算されます。

​

LLM as a Judge

LLM-as-a-Judge メトリクスは、プレイグラウンドで名前とプロンプトを指定することで作成できます。既存の通話トランスクリプトに対してさまざまなプロンプトを試すには、メトリクス作成フィールドに call ID をコピーし、evaluate をクリックしてサンプル出力を生成します。 メトリクス名には、CLI から管理できるよう、小文字のアルファベット、数字、および「-」「_」「.」の文字のみを使用できます。また、メトリクス名は組織内で一意である必要があります。

​

メトリクスの割り当て

メトリクスが作成されると、プレイグラウンドのエージェントページからエージェントに割り当てることができます。それ以降にそのエージェントが発信または受信するすべての通話で、メトリクスの結果が計算され、コンソールおよび API で確認できます。既存のエージェントにメトリクスを割り当てても、過去の通話に対しては自動的に実行されない点に注意してください。