Java エージェントを使用した OpenAI API のモニタリング
Java エージェントは、OpenAI API の使用状況と関連メトリックをモニターするのに役立ちます。Completion ChatCompletion Moderation API の TheoKanning OpenAI Java フレームワークと OpenAI バックエンドとの通信をモニターします。
次のメトリックは、アプリケーション、階層、およびノードの各レベルで報告されます。
- 1分あたりのコール数
- コスト
- 1分あたりのエラー数
- トークン
次に、メトリックパスの例を示します。
- Per model metric path-
Application Infrastructure Performance|OpenAI_Tier|OpenAI|ada|Cost - All model cumulative metrics path-
Application Infrastructure Performance|OpenAI_Tier|OpenAI|Cost - All Models - Net application level metrics path-
Overall Application Summary|OpenAI - Cost - ada