[画像認識] package
- 最終更新日2025/07/16
[画像認識] package
[画像認識] packageには、画像を基にアプリケーションのユーザー インターフェース (UI) 要素を検索して、そのアプリケーション内のタスクを自動化できるactionsが含まれています。
画像認識 packageのActions
注:
macOSプラットフォームで自動化を作成すると、確認ウィンドウが表示され、macOSでアプリの権限を付与するよう促されます。 このトピックでは、プロンプトメッセージの一覧とアプリの権限を管理するための指示を閲覧できます。
以下のようなアプリケーションの UI 要素をキャプチャできない場合は、これらのactionsを使用してタスクを自動化します。
- Citrix 経由で公開されている
- リモート デスクトップ プロトコル (RDP) を使用してアクセスされている
- レガシー テクノロジーを使用して開発されている
[画像認識] は、オブジェクトベースの認識が機能しない場合や信頼性が低い場合にも役立ちます。 たとえば、画像を使用してアプリケーションの [閉じる] ボタンを検索し、左クリック操作を実行できます。
[画像認識] packageには、以下のactionsが含まれています。
| Action | 説明 |
|---|---|
| ウィンドウで画像を検索 | [[ウィンドウで画像を検索] action の使用]を参照してください。 |
| ウィンドウでウィンドウを検索 | [[ウィンドウでウィンドウを検索] action の使用]を参照してください。 |
Secure recording
When secure recording mode is enabled, bots do not display the target
object images after capture. This ensures that sensitive data is not shown.
注: Although the bots do not display the target
images after capture, the images are still stored in the Control Room because they are required to run the bots.
When you record a task in secure recording mode, the Preview window temporarily shows an image of the captured area. This image is hidden after you navigate away from the Bot editor window or refresh it.
For new automations, when you capture
objects in secure recording mode, you can choose to automatically delete the values
of the unused object properties by enabling the Automatically delete
unused object properties on save option. When you enable this
option, the values of the object properties that are not a part of the search
criteria will be discarded when you save the automation and refresh it. This ensures
that personally identifiable information (PII) is not accidentally stored in the
automation. For more information on how to enable the secure recording settings, see
安全な記録.
注: If you are using Generative Recorder to automate your
tasks, and you have enabled the Automatically delete unused object
properties on save option, then the Generative AI fallback is
not supported.
注:
- This capability is supported with Recorder package (version 3.2.1-20240606-105427 and later) and Bot Agent (version 22.60.23 and later).
- If you want to use this option in your existing automation, you must recapture the controls.
- The value of the Left, right, height, and width properties will not be discarded.
A user with admin privileges must enable this setting. See 設定を構成する.