生成式录制器 常见问题解答

查看常见问题解答以了解更多关于 生成式录制器 的信息。

1. 生成式录制器 何时可用?
Automation 360 v.32 开始,所有持有许可证的云客户将可使用 生成式录制器
2. 如何选择 生成式录制器 功能?
生成式录制器随 Automator AI Base 许可证提供,参阅 智能自动化 - Automator AI Base
3. 是否可以在我的本地部署 Control Room 中使用 生成式录制器
生成式录制器 目前仅对我们的云客户开放。对本地 Control Room生成式录制器 支持仍在规划中。
4. 要使用 生成式录制器,是否需要从生成式 AI 提供商(如 Azure OpenAI)处购买任何许可证,或者是否需要执行任何 LLM 配置?
否,生成式录制器 负责生成式 AI 的集成。 您无需购买 Azure OpenAI 许可证或执行任何其他配置即可启用基于生成式 AI 的回退功能。
注: 但仍需要一个 Automator AI Base 许可证来启用 生成式录制器
5. 如果公司策略不允许使用生成式 AI,是否还可以使用 生成式录制器
是,您可以使用录制器的本地回退功能增强自动化弹性。 本地回退功能并不基于生成式 AI。
6. 录制器本地回退功能与基于生成式 AI 的回退功能有何不同?
  • 录制器本地回退功能: 依赖于自动化设计过程中收集的额外 UI 元素细节。 使用录制器内置算法和这些额外数据在发生回退时自动化 UI 元素。
  • 基于生成式 AI 的回退功能: 利用实时应用程序的当前状态,但不包括敏感的业务数据。 使用大型语言模型识别目标 UI 元素的独特特征,以在发生回退时进行自动化。
7. 如何管理无人值守自动化中频繁出现的回退通知弹窗?
无人值守自动化在发生回退时不会出现回退通知对话框。 这将确保自动化流程顺利进行。
注: 回退通知对话框仅显示给平民和专业开发人员。
8. 购买前是否可以试用 生成式录制器
您可以通过我们的云托管预览环境试用 生成式录制器
9. 是否可以为每个自动化选择性启用 生成式录制器
是,可以根据您的需求和偏好在每个自动化的基础上启用 生成式录制器
10. 如果使用 Microsoft Active Accessibility、Microsoft UI Automation 或 COM UI Automation 捕获对象,回退机制在这些方法中是否仍以相同方式运行?
生成式录制器 目前仅支持通过 HTML 技术捕获对象的基于 web 的应用程序的回退。
11. 是否存在 生成式录制器 无法运行的情况?
如果应用程序发生重大更改,导致 AI 无法找到与之前相同的路径,像普通 录制器 一样,将运行失败。 在这种情况下,我们建议您重新设计该部分自动化。
12. 在 Control Room 中启用安全录制时,生成式录制器 可以运行吗?
是的,只要禁用保存时自动删除未使用对象属性的选项,生成式录制器 就能在启用安全录制的情况下运行。
13. 生成式录制器 使用哪个生成式 AI 提供商?
生成式录制器 的设计使底层大型语言模型的选择完全透明。 我们目前使用 Microsoft Azure OpenAI。 请注意,您的数据中心与 Azure OpenAI 之间没有直接集成,因为所有出站通信都是通过托管在 Automation Anywhere Cloud 中的专用服务进行。
14. 生成式录制器 是否能够与我工作场所认可的生成式 AI 供应商(例如,谷歌、亚马逊、Anthropic)集成?
我们目前正在评估这一功能,以便将其纳入我们的路线图。
15. 如何确保基于生成式 AI 的回退功能中应用业务数据的安全性?
对于基于生成式 AI 的回退功能,我们仅使用特定于当前自动化 UI 元素的应用程序源代码数据。 我们不会保留、传输或使用任何业务数据,例如自动化业务应用程序中的个人身份信息。 任何作为应用源代码一部分的潜在业务数据,在使用之前都会先进行匿名化处理。 此外,发生回退之前通过自动化输入或提取的任何数据也将被排除在我们的处理范围之外。 我们确保没有业务数据被传送到大型语言模型。
16. 生成式录制器 是否会在我公司数据中心与公共生成式 AI 提供商之间开启任何直接通信?
数据中心与公共生成式 AI 提供商之间没有直接集成。 相反,任何对生成式 AI 的回退请求都通过托管在 Automation Anywhere 云中的专用服务进行。 这可以更好地控制与生成式 AI 提供商交换的数据。 因此,这提高了数据隐私和安全性,因为任何潜在的敏感信息都不会直接暴露给生成式 AI 提供商,从而降低了数据泄露或未经授权访问的风险。
17. 如何确保生成式 AI 为我们的自动化提供可靠的回退功能?
我们使用一系列精心设计的提示来限制自动化可以采取的路径范围。 这可以完全防止生成式 AI 产生幻觉。 当有疑问时,自动化不会猜测。
18. Automation Anywhere 对配置 生成式录制器 弹性的建议是什么?
我们建议您为自动化配置所有三种类型的弹性。 当同时启用本地回退、基于生成式 AI 视觉的回退和基于文本的回退时,自动化将首先使用本地回退在捕获的对象上执行 操作。 如果自动化无法通过本地回退支持检测到对象,系统将优先采用基于生成式 AI 视觉的回退,如有需要,随后将使用基于文本的回退。
19. 生成式录制器 如何确保 GenAI 回退建议的可靠性?
生成式录制器 验证回退 DOMXPath 可以唯一识别目标 UI 元素后,将进行额外的验证步骤。 这涉及比较 UI 元素的其他属性。 例如,如果自动化操作涉及数据输入,生成式录制器 将确保只有在回退 DOMXPath 与数据输入(如文本框)相对应,而不是与按钮或标签相对应时,自动化才会继续。
20. 购买 Automator AI Base 许可证后,是否也可以将 生成式录制器 集成到现有的自动化中?
我们建议为您现有的自动化启用 生成式录制器。 这将确保新的 操作 具有更好的弹性,并确保现有的 操作 也将在其 录制器 对象被重新捕获时得到改善。 重新捕获这些对象至关重要,因为 生成式录制器 使用了额外的设计时 UI 元素数据来增强其回退机制。 从 录制器 软件包(版本 3.1.5.20240412-132755)开始捕获这些额外数据。
21. 我可以在较旧版本的 录制器 软件包 中使用基于视觉的回退吗?

不可以,仅 录制器 软件包 版本 4.3.2-20250711-221403 及更高版本支持基于视觉的回退。

22. 通过使用 Automator AI Base 许可证,可以获得多少 生成式录制器 的建议?
生成式录制器、基于文本的回退和本地回退不会使用您的 Automator AI 配额中的任何推荐。然而,生成式录制器 的视觉回退每次会消耗一个推荐,但是仅限在运行时实际触发回退的情况下。 视觉回退已启用的自动化数量不会影响您的配额。 只有在执行期间激活视觉回退时,才会扣除推荐。
23. 我是否可以获得 生成式录制器 防止自动化失败的相关记录 ?
生成式录制器 为授权用户提供完整的可追溯性,涵盖所有帮助防止自动化失败的情况。 这包括系统警报中的通知,并附有指向特定自动化详细信息的链接。 审核日志条目还将记录相关的回退详细信息,例如用户身份、设备信息、自动化名称以及发生回退的行号。 这种全面的记录机制有助于监控 生成式录制器 在影响自动化决策中的具体作用。
24. 您是否会缓存生成式 AI 的响应,以在下次运行中节省自动化相同 UI 元素的成本?
是,我们将缓存生成式 AI 的响应以用于成功的回退事件。 这将节省生成式 AI API 调用,并缩短自动化执行时间。 从 Automation 360 v.33 开始将支持此功能。
25. 生成式录制器 是否可以根据生成式 AI 的建议自动更新自动化流程?
生成式录制器 支持在人类参与机制下自动更新自动化。 平民开发人员和专业开发人员将收到自动更新自动化的建议列表,以提高其弹性。 接受建议后,自动化将更新。
26. 是否需要打开任何端口才能使用 生成式录制器
否。如果您可以通过云访问 Automation Anywhere Control Room,那么您也可以访问 生成式录制器
27. 如何查看录制器软件包设置?
要查看 生成式录制器 设置,请确保以下内容:
  • Automator AI Base 的同一应用程序服务器上。
  • 机器人编辑器 中添加录制器 > 捕获 操作
28. 什么是生成式录制器中的视觉模型驱动回退?
视觉模型驱动的回退是一种集成语言模型的高级自动化回退机制,以便在通用录制器无法自动处理某个 UI 元素时实现自愈自动化。
29. 如何管理基于视觉回退的数据安全和隐私?
生成式录制器包含一项先进的图像净化算法,可在 VLM 处理任何应用程序图像以进行 UI 元素检测之前,自动屏蔽敏感的业务数据。 此过程确保在分析期间不会泄露任何机密信息。

有关更多信息,请参阅基于视觉的回退中的图像净化

30. 生成式录制器如何通过视觉回退准确自动处理 UI 元素?
生成式录制器具有内置的验证引擎,可验证所识别 UI 元素的准确性。 引擎会评估检测到的元素的置信度分数,如果低于预定义的阈值,系统就会启动新一轮的处理和识别。 此迭代过程提高了回退准确性并防止错误单击,确保实现可靠的自动化。
31. 如果视觉回退无法定位 UI 元素会发生什么?
如果生成式录制器无法以足够的置信度识别目标 UI 元素,将优先保证准确性,选择优雅地失败,而不是尝试自动处理错误的元素。 系统将显示错误消息,允许您采取纠正措施,而不是继续执行不可靠的自动化。
32. 生成式录制器模型是否使用了我的业务数据进行训练?
不,客户业务数据不会用于训练生成式录制器模型。