Automation 360

AI プロンプトログのインタラクションの監視

PDF としてダウンロード

コンテンツ

AI プロンプトログのインタラクションの監視

PDF としてダウンロード

最終更新日2024/10/31

AI プロンプトログのインタラクションの監視

AI プロンプトログは、モデルインタラクションのオートメーション実行内で発生するすべてのセッションの統合された要約ビューを提供します。

セッション内で複数のモデルとのインタラクションがあることがあります。すべてのオートメーション実行に、セッション ID が割り当てられ、すべてのイベントを 1 つのセッション ID に集約できます。

AI ガバナンス > AI プロンプトログ > セッション ID 列のセッション IDのリンクをクリックすると、そのセッション ID内で発生したすべてのモデルインタラクションの詳細を掘り下げて表示できます。詳細なビューには、基礎モデルの間で交換されるプロンプト、レスポンス、その他のパラメーターが含まれます。 [セッション ID] で検索を絞り込んで、選択したセッションに固有の、追加の詳細を表示できます。

注: カーソルをアクションアイコンに合わせると、それぞれについて特定の機能の説明が表示されます。

AI プロンプトログテーブルの詳細

AI プロンプトログテーブルは、以下の列に従って詳細をソートして表示します。

AI プロンプトログテーブルの詳細


	所要時間: セッション実行の開始時刻と終了時刻を示します。注: セッションが進行中の場合、この情報は利用できません。
	開始時刻: セッション実行の開始時刻を示します。
	セッション ID: オートメーション実行のセッション ID を示します。セッションは、同じオートメーション実行の一部である複数のモデルインタラクションで構成できます。 [セッション ID] リンクをクリックすると、そのセッションのすべてのモデルインタラクションの詳細が表示されます。
	プロンプトタイプ: オートメーションで使用されるプロンプトのタイプが表示されます。たとえば、生成 AI パッケージが使用されている場合はフリーフォームが関連し、プロンプトテンプレート生成 AI プロンプトテンプレートが使用されている場合はパッケージが関連します。
	オートメーション名: プロンプトを使用したオートメーション名を示します。
	デバイス名: オートメーションが実行されたデバイスの ID を示します。注: アクションが Control Room で実行された場合、この情報は利用できません。
	ユーザー: オートメーションを実行したユーザーの ID が表示されます。
	フォルダーパス: 自動化が実行されたフォルダーの場所。

AI プロンプトログセッションの詳細

AI プロンプトログテーブルから [セッション ID] リンクをクリックすると、さらにドリルダウンしてセッションの詳細を表示できます。

AI プロンプトログセッション ID の詳細

注: [Automation type] (オートメーションタイプ) フィールドは、モデルインタラクションセッションで基礎モデルが使用されたモデルタイプを示します。残りのフィールドは、AI プロンプトログテーブルの詳細と同じです。

モデルインタラクションの詳細

そのインタラクションについて表示されている基礎モデル名を展開することで、同じ画面でモデルインタラクションセッションの追加詳細を表示できます。詳細セクションのプロンプトまたはアクションをクリックすると、プロンプトまたはモデルレスポンスのその他の詳細が表示されます。

AI プロンプトログ追加セッションの詳細


テーブル項目	内容
プロンプト	プロンプトを定義するときに [プロンプト] フィールドにユーザーが入力したプロンプトテキストを示します。
レスポンス	プロンプトリクエストに対してモデルから受け取ったレスポンスを示します。

通常、オートメーションリードおよび GRC リードは、オートメーション内で基礎モデルを使用するときにポリシーが遵守されていることを確認するために、コンプライアンスおよびガバナンスのログを監視するので、各セッションのモデルインタラクションの追加詳細を表示する権限を持ちます。

[詳細] をクリックすると、モデルインタラクションの追加パラメーターが表示されます。

注: この追加の詳細分析は、関連する権限がオートメーション管理者によって有効にされている場合にのみ、プロ開発者が利用できます ( 管理 > 役割 > AI ガバナンス > AI プロンプトログの表示 > AI プロンプトの詳細の表示)。そうでない場合、第一レベルのセッションの詳細しか表示できません。


テーブル項目	説明
セッション時間	開始時刻と終了時刻を示します。
ベンダー	基礎モデルプロバイダー名を示します。
外部セッション ID	セッション内でキャプチャされた特定のモデルインタラクションのセッション ID を示します。 1 つのセッションは、1 つのオートメーション実行の中で、複数のモデルインタラクションで構成できます。この情報を使用して、セッションで発生しているすべてのモデルインタラクションを追跡できます。
パラメーター	プロンプトに使用される次のパラメーター値が表示されます。 Temperature、Top P、Max Tokens、Presence Penalty など。これらのパラメーターとその値は、モデルプロバイダーによって異なります。
アクション	プロンプトで使用されているモデルプロバイダーアクションを示します。
モデル	次のような基礎モデルバージョン名を示します。 Azure OpenAI の GPT 3.5 Turbo、Google Vertex AI の VertexAI、Amazon Bedrock の Claude など。
行番号	オートメーションでこのアクションが発生した行番号を示します。この情報を使用すると、オートメーション内のアクションをすばやく特定できます。