> ## Documentation Index
> Fetch the complete documentation index at: https://docs.cartesia.ai/llms.txt
> Use this file to discover all available pages before exploring further.

# メトリクス

Line プラットフォームには、開発フェーズおよび本番環境の両方でエージェントのパフォーマンスを評価するための一連のツールが含まれています。エージェントを評価するためのメトリクスをどのように定義するかは、完全にあなたが制御できます。

<Frame caption="メトリクスの使用">
  <iframe src="https://www.youtube.com/embed/IcJYTF5kOz0?si=JBx2ujIZxikgotF1" frameBorder="0" webkitallowfullscreen mozallowfullscreen allowFullScreen style={{ width: "100%", height: "400px" }} />
</Frame>

## システムメトリクス

デフォルトでは、Line エージェントが行うすべての通話について、パフォーマンス評価に役立つ一連のシステムメトリクスが自動的に計算されます。

| システムメトリクス                      | 説明                                             |
| ------------------------------ | ---------------------------------------------- |
| system\_call\_success          | 推論コードのクラッシュなどによって通話が予期せず切断されたかどうかを示すブール値のステータス |
| system\_text\_to\_speech\_ttfb | 会話の最初のターンで TTS モデルが生成する音声の最初のバイトまでの時間          |

### LLM as a Judge

LLM-as-a-Judge メトリクスは、プレイグラウンドで名前とプロンプトを指定することで作成できます。既存の通話トランスクリプトに対してさまざまなプロンプトを試すには、メトリクス作成フィールドに call ID をコピーし、evaluate をクリックしてサンプル出力を生成します。

<Frame caption="カスタムメトリクス作成のデモ">
  <iframe src="https://www.youtube.com/embed/C8s5QjD6mRc?si=GNf4kDd0MAAXyj_U" frameBorder="0" webkitallowfullscreen mozallowfullscreen allowFullScreen style={{ width: "100%", height: "400px" }} />
</Frame>

<Tip title="プロンプトのコツ" icon="gavel">
  LLM as a Judge メトリクスは、単一の値と description フィールドを返すように記述してください。
</Tip>

メトリクス名には、CLI から管理できるよう、小文字のアルファベット、数字、および「-」「\_」「.」の文字のみを使用できます。また、メトリクス名は組織内で一意である必要があります。

## メトリクスの割り当て

メトリクスが作成されると、プレイグラウンドのエージェントページからエージェントに割り当てることができます。それ以降にそのエージェントが発信または受信するすべての通話で、メトリクスの結果が計算され、コンソールおよび API で確認できます。既存のエージェントにメトリクスを割り当てても、過去の通話に対しては自動的に実行されない点に注意してください。

<Frame>
  <img src="https://mintcdn.com/cartesia-2650f86a/hwxvcrAswl9LXrPR/assets/images/agents/metric-addition.png?fit=max&auto=format&n=hwxvcrAswl9LXrPR&q=85&s=44e8bcc5cfeb98e9a6a5f96ef8555bb5" alt="メトリクスを割り当てる" width="1976" height="1038" data-path="assets/images/agents/metric-addition.png" />
</Frame>
