AISense の概要
- 最終更新日2022/09/30
AISense の概要
AISense は、すべての環境においてオートメーションを高速化して精緻化する高度な機能と学習アルゴリズムを提供します。
Bot はリモート デスクトップ環境でタスクを自動化するため、マウス クリックとキーボード操作のみを実行できます。これにより、Bot は画像、座標、および OCR コマンドのみを使用することができます。リモート環境でのオートメーション タスクの精度に影響する問題を以下にいくつか示します。
- オートメーション プラットフォームは、アプリケーションの画像を受け取ります。UI 要素にはアクセスできません。
- 画面の解像度とスケーリングは、ホスト マシンとクライアント マシンの間で異なる場合があります。
- UI 要素の位置は、クライアント マシンの画面上の Web アプリケーションでは変わる場合があります。
AISense は、アプリケーション画像の UI 要素を識別するために、コンピューター ビジョンを使用してインテリジェントな Image Recognition などの AI 技術を提供します。次に、その画像からすべての UI オブジェクトを自動的に作成します。リモート デスクトップ環境でタスクを自動化することができます。これらのオブジェクトを MetaBot ロジックを通じてタスクの自動化に使用することで、多くの時間を節約できます。
AISense では、以下のタスクを自動化できます。
- Citrix 環境で利用できるアプリケーション (Citrix Xen Desktop および Citrix Virtual Apps)。
- リモート デスクトップ プロトコル (RDP) を通じてアクセスされるアプリケーション。
- Delphi などのレガシー アプリケーション。
AISense は、コンピューター ビジョンでオブジェクトの構成を判断してオブジェクト間の動的リンクをインテリジェントに作成し、変化に強いオートメーションを実現します。AISense では、ラベルやテキストの位置が変わっても、アプリケーションを正確に自動化できます。
MetaBot の [データセットをエクスポート] コマンドを使用すると、アプリケーションのすべての UI 要素から大量のデータを抽出できます。同様に、[データセットをインポート] コマンドを使用すると、アプリケーションのすべての UI 要素に大量のデータを挿入できます。これらのコマンドは、標準アプリケーションとリモート アプリケーションで使用できます。AISense を使用すると、アプリケーションを 1 回スキャンするだけで、画面に表示されているすべてのオブジェクトのデータの抽出や挿入ができるため、実行時間を大幅に短縮できます。
- 自動リンク: テキスト ボックスなどのオブジェクトは、画面の作成中に別のオブジェクトにリンクされます。
- 手動リンク: ユーザーがオブジェクトを手動でリンクします。
- リモート デスクトップ アプリケーションを使用して画面をキャプチャする場合は、フルスクリーン オプションを有効にします。
- OCR コマンドを使用する場合は、DPI が [標準] または [100] に設定されていることを確認します。
- 発生事項は、上から下へ、左から右へ並ぶようにします。