AI プロンプト ログ のインタラクションをモニターする
- 最終更新日2024/12/09
AI プロンプト ログ のインタラクションをモニターする
AI プロンプト ログ は、モデルインタラクションのための自動化実行内で発生するすべてのセッションの統合された概要ビューを提供します。
セッション内で複数のモデルとのインタラクションがある可能性があります。 すべての自動化実行には Session ID が割り当てられ、すべてのイベントを単一のセッションIDに集約できます。
セッション ID内で発生したすべてのモデル インタラクションの詳細を掘り下げて表示できます。 詳細なビューには、ファウンデーショナルモデルの間で交換されるプロンプト、レスポンス、その他のパラメーターが含まれます。 セッションIDで検索を絞り込んで、選択したセッションに特有の追加の詳細を表示できます。
列のセッション IDのリンクをクリックすると、そのAI プロンプト ログ テーブルの詳細
AI プロンプト ログ テーブルは、これらの列に従って詳細をソートして表示します。
所要時間: セッション実行の初級時刻と終了時刻を表示します。
注: この情報は、セッションが進行中の場合には利用できません。
|
|
開始時刻: セッション実行の開始時刻を表示します。 |
|
セッション ID: オートメーション実行のセッション ID を表示します。 セッションは、同じオートメーション実行の一部である複数のモデルインタラクションで構成される場合があります。 セッションID リンクをクリックして、そのセッションのすべてのモデルインタラクションの詳細を表示します。 |
|
プロンプト タイプ: オートメーションで使用されているプロンプトの種類が表示されます。 例えば、Free Formは生成 AI パッケージが使用されるときに関連し、プロンプト テンプレートは生成 AI プロンプト テンプレート パッケージが使用されるときに関連します。 |
|
オートメーション名: プロンプトを使用したオートメーション名を示します。 |
|
デバイス名: オートメーションが実行されたデバイスの ID が表示されます。
注: この情報は、Control Roomでアクションが実行された場合は利用できません。
|
|
ユーザー: オートメーションを実行したユーザーの ID が表示されます。 |
|
フォルダー パス: 自動化が実行されたフォルダーの場所。 AI スキル が自動化(親または子)と統合されると、表示されるフォルダパスは親自動化のフォルダパスと同じです。 |
AI プロンプト ログ セッションの詳細
AI プロンプト ログ テーブルから、Session ID リンクをクリックして、セッションの詳細をさらに掘り下げて表示できます。
モデル インタラクションの詳細
そのインタラクションのために表示されている基盤モデル名を展開することで、同じ画面で追加のモデルインタラクションセッションの詳細を表示できます。 詳細セクションのプロンプトまたはアクションをクリックして、プロンプトやモデルの応答の詳細を表示します。
テーブル項目 | 説明 |
---|---|
プロンプト | プロンプトを定義する際に Prompt フィールドにユーザーが入力したプロンプトテキストを表示します。 |
レスポンス | モデルからプロンプトリクエストに対して受信したレスポンスが表示されます。 |
通常、オートメーションリードとGRCリードは、各セッションでモデルの相互作用に関する追加の詳細を表示する権限を持っています。これは、オートメーション内でファウンデーションモデルを使用する際にポリシーが遵守されていることを確認するために、コンプライアンスおよびガバナンスのログを監視するためです。
テーブル項目 | 説明 |
---|---|
セッションの期間 | 初級時刻と終了時刻が表示されます。 |
販売元 | 基礎モデルプロバイダー名を示します。 |
外部セッションID | セッション内でキャプチャされた特定のモデルインタラクションのセッションIDを表示します。 単一のセッションは、単一のオートメーション実行内で複数のモデルインタラクションで構成されることがあります。 この情報を使用して、セッション内で発生するすべてのモデルインタラクションを追跡できます。 |
パラメーター | プロンプトに使用されるパラメーター値が表示されます。例えば: Temperature、Top P、Max Tokens、Presence Penalty など。 これらのパラメータとその値は、モデルプロバイダーによって異なります。 |
アクション | プロンプトで使用されているモデルプロバイダーのアクションが表示されます。 |
モデル | 基盤モデルのバージョン名を表示します。例えば: Azure OpenAI の GPT 3.5 Turbo、Google Vertex AI の VertexAI、Amazon Bedrock の Claude など。 |
行番号 | オートメーションでこのアクションが発生した行番号が表示されます。 この情報を使用すると、オートメーション内のアクションをすばやく特定できます。 |
オートメーション実行については、複数のモデルインタラクションがある場合、セッションログの各モデル呼び出しごとに個別の展開可能なパネルが表示されます。 これは、生成 AI パッケージのために実行される自動化の典型的な事例です。