Perguntas frequentes sobre Gravador generativo

Consulte as perguntas frequentes para saber mais sobre Gravador generativo.

1. Quando o Gravador generativo estará disponível?
O Gravador generativo estará disponível para todos os clientes de nuvem licenciados a partir do Automation 360 v.32.
2. Como faço para optar pelo recurso Gravador generativo?
O Gravador generativo está disponível com a licença, Base do Automator AI; consulte Automação inteligente – base do Automator AI.
3. Posso usar o Gravador generativo na minha Control Room local?
O Gravador generativo está disponível no momento apenas para nossos clientes de nuvem. O suporte do Gravador generativo para Control Room On-prem está sendo planejado.
4. Preciso comprar alguma licença de provedores de IA generativa como o Azure OpenAI ou realizar alguma configuração de LLM para usar o Gravador generativo?
Não, o Gravador generativo cuida da integração de IA generativa. Não é necessário adquirir a licença do Azure OpenAI ou executar qualquer configuração adicional para habilitar o substituto baseado em IA generativa.
Nota: Ainda será necessária uma licença Base do Automator AI para habilitar o Gravador generativo.
5. Se a política da empresa não permitir o uso de IA generativa, ainda posso usar Gravador generativo?
Sim, você pode usar o fallback nativo do gravador para obter maior resiliência de automação. O fallback nativo não é baseado em IA generativa.
6. Qual é a diferença entre o fallback nativo do gravador e o fallback baseado em IA generativa?
  • Fallback nativo do gravador: Depende de detalhes adicionais de elementos da interface do usuário coletados durante o projeto de automação. Ele emprega o algoritmo integrado do gravador e esses dados extras para automatizar os elementos da UI se ocorrer um fallback.
  • Fallback baseado em IA generativa: Utiliza o estado atual dos aplicativos ativos, excluindo dados comerciais confidenciais. Ele emprega grandes modelos de linguagem para identificar características exclusivas do elemento de UI de destino para automação em caso de fallback.
7. Como os pop-ups frequentes de notificação de fallback são gerenciados para automações não assistidas?
A janela de diálogo de notificação de fallback não aparecerá para automações não assistidas sempre que ocorrer um fallback. Isso garantirá um processo de automação tranquilo.
Nota: A janela de diálogo de notificação de fallback é exibida apenas para desenvolvedores cidadãos e profissionais.
8. Posso experimentar o Gravador generativo antes de comprar?
É possível experimentar o Gravador generativo por meio do nosso ambiente de avaliação hospedado na nuvem.
9. Posso ativar seletivamente o Gravador generativo por automação?
Sim, o Gravador generativo pode ser ativado por automação conforme suas necessidades e preferências.
10. Se um objeto for capturado usando o Microsoft Active Accessibility, o Microsoft UI Automation ou o COM UI Automation, o mecanismo de fallback ainda funciona da mesma maneira em todos esses métodos?
No momento, o Gravador generativo oferece suporte a fallback apenas para aplicativos baseados na web, onde os objetos são capturados com tecnologia HTML.
11. Existe uma circunstância em que o Gravador generativo pode não funcionar?
Se o aplicativo tiver passado por uma mudança tão drástica que a IA não consiga encontrar um caminho equivalente ao que viu antes, ele falhará da mesma forma que o Gravador normal. Nesses casos, recomendamos reformular essa parte da automação.
12. O Gravador generativo funciona quando a gravação segura está ativada na Control Room?
Sim, o Gravador generativo funciona com a gravação segura ativada, desde que a opção para excluir automaticamente propriedades de objeto não utilizadas ao salvar esteja desativada.
13. Qual provedor de IA generativa é usado pelo Gravador generativo?
O Gravador generativo foi projetado de forma que a escolha do grande modelo de linguagem subjacente seja completamente transparente. Atualmente, usamos o Microsoft Azure OpenAI. Observe que não há integração direta entre o seu data center e o Azure OpenAI, pois toda a comunicação de saída acontece por meio de um serviço dedicado hospedado na Automation Anywhere Cloud.
14. O Gravador generativo pode se integrar aos provedores de IA generativa aprovados em meu local de trabalho, por exemplo, Google, Amazon ou Anthropic?
No momento, estamos avaliando esse recurso para nosso roteiro.
15. Como vocês garantem a segurança dos dados comerciais do aplicativo para fallback baseado em IA generativa?
Para fallback baseado em IA generativa, usamos apenas os dados do código-fonte do aplicativo que são específicos do elemento de UI atualmente automatizado. Não retemos, transmitimos ou utilizamos quaisquer dados comerciais, como informações de identificação pessoal do aplicativo comercial automatizado. Quaisquer dados comerciais potenciais que façam parte do próprio código-fonte do aplicativo serão usados somente após torná-los anônimos. Além disso, quaisquer dados inseridos ou extraídos pela automação até a ocorrência de fallback também serão excluídos do nosso processamento. Garantimos que nenhum dado comercial seja encaminhado para LLMs.
16. O Gravador generativo abre alguma comunicação direta entre o data center da minha empresa e os provedores públicos de IA generativa?
Não há integração direta entre o data center e os provedores públicos de IA generativa. Em vez disso, as solicitações de fallback para IA generativa são canalizadas por meio de um serviço dedicado hospedado na Automation Anywhere Cloud. Isso proporciona um melhor controle sobre os dados trocados com provedores de IA generativa. Consequentemente, isso aumenta a privacidade e a segurança dos dados, uma vez que qualquer informação potencialmente confidencial não é diretamente exposta aos provedores de IA generativa, reduzindo o risco de violações de dados ou acesso não autorizado.
17. Como posso confiar que a IA generativa fornecerá um fallback confiável para nossas automações?
Usamos uma série de prompts cuidadosamente projetados que limitam o escopo dos caminhos que uma automação pode seguir. Isso evita que alucinações retornem da IA generativa. Em caso de dúvida, a automação não fará adivinhações.
18. Qual é a recomendação da Automation Anywhere para a configuração da resiliência do Gravador generativo?
Recomendamos configurar os três tipos de resiliência para uma automação. Quando as opções de fallback nativo, fallback baseado em visão por IA generativa e fallback baseado em texto estiverem habilitadas, a automação utiliza primeiro o fallback nativo para executar ações no objeto capturado. Se a automação não conseguir detectar o objeto com o suporte de fallback nativo, ela usará em seguida o fallback baseado em visão da IA generativa, seguido pelo fallback baseado em texto, se necessário.
19. Como Gravador generativo garante a confiabilidade das recomendações do GenAI para fallback?
Após o Gravador generativo verificar que um DOMXPath de fallback consegue fazer a identificação exclusiva do elemento de interface do usuário de destino, ele realiza uma etapa de validação adicional. Isso envolve comparar outras propriedades do elemento da interface do usuário. Por exemplo, se a ação automatizada envolver a entrada de dados, o Gravador generativo garante que a automação prossiga somente se o DOMXPath de fallback corresponder a uma entrada de dados, como uma caixa de texto, e não a botões ou rótulos.
20. Após a compra da licença de Base do Automator AI, posso integrar Gravador generativo nas minhas automações existentes também?
Recomendamos habilitar o Gravador generativo para suas automações existentes. Isso garantirá que novas ações tenham melhor resiliência e ações existentes também serão aprimoradas quando seu objetos do Gravador forem recapturados. É essencial recapturar os objetos porque o Gravador generativo usa dados adicionais de elementos da interface do usuário em tempo de design para aprimorar seus mecanismos de fallback. Esses dados adicionais são capturados a partir do Gravador pacote (versão 3.1.5.20240412-132755) em diante.
21. Posso usar o fallback baseado em visão com versões mais antigas do pacote Gravador?

Não, o fallback baseado em visão é compatível apenas com o pacote Gravador de versão 4.3.2-20250711-221403 e mais recente.

22. Quantas recomendações recebo para Gravador generativo com a licença de Base do Automator AI?
O Gravador generativo, o fallback baseado em texto e o fallback nativo não usam nenhuma recomendação da sua cota do Automator AI. O fallback de visão do Gravador generativo, no entanto, consome uma recomendação por fallback, mas somente quando o fallback é realmente acionado em tempo de execução. O número de automações com fallback de visão ativado não afeta sua cota. Recomendações são deduzidas apenas quando a visão de fallback é ativada durante a execução.
23. Receberei um registro de casos em que o Gravador generativo evitou falhas de automação?
O Gravador generativo fornece rastreabilidade completa para usuários autorizados em todas as instâncias em que ajudou a evitar falhas de automação. Isso inclui notificações em alertas do sistema com um link para os detalhes da automação específica. As entradas do log de auditoria também documentam detalhes relevantes de fallback, como a identidade do usuário, informações do dispositivo, nome da automação e o número da linha onde ocorreu o fallback. Essa manutenção abrangente de registros facilita o monitoramento de casos em que o Gravador generativo teve influência nas decisões de automação.
24. Vocês armazenarão em cache as respostas da IA generativa para economizar custos de automatização do mesmo elemento de UI na próxima execução?
Sim, armazenaremos em cache as respostas da IA generativa para eventos de fallback bem-sucedidos. Isso economizará chamadas de API de IA generativa e reduzirá o tempo de execução da automação. Isso será compatível a partir do Automation 360 v.33.
25. O Gravador generativo consegue atualizar automaticamente as automações conforme as recomendações da IA generativa?
O Gravador generativo permite a atualização automática de automações com interação humana. Os desenvolvedores cidadãos e os desenvolvedores profissionais obtêm a lista de recomendações para atualizar automaticamente as automações e torná-las mais resilientes. As automações são atualizadas depois que as recomendações são aceitas.
26. Preciso abrir alguma porta para usar o Gravador generativo?
Não. Se você puder acessar a Automation Anywhere Control Room pela nuvem, também terá acesso ao Gravador generativo.
27. Como posso visualizar as configurações do pacote do Gravador?
Para ver as configurações do Gravador generativo, certifique-se do seguinte:
  • Base do Automator AI é instalado.
  • A ação Capturar > Gravador foi adicionada ao Editor de bot.
28. O que é o fallback baseado em modelo de visão no Gravador Generativo?
O fallback baseado em modelo de visão é um mecanismo avançado de fallback de automação que integra modelos de linguagem para facilitar a automação de autocorreção quando o Gravador Universal não pode automatizar um elemento da interface do usuário.
29. Como a segurança e a privacidade dos dados são gerenciadas para o fallback baseado em visão?
O Gravador Generativo inclui um algoritmo avançado de sanitização de imagens que automaticamente redige dados empresariais confidenciais antes que qualquer imagem de aplicativo seja processada por VLMs para detecção de elementos de UI. Esse processo garante que nenhuma informação confidencial seja exposta durante a análise.

Para obter mais informações, consulte Sanitização de imagem em fallback baseado em visão

30. Como o Gravador Generativo automatiza com precisão os elementos da interface do usuário usando o fallback de visão?
O Gravador Generativo apresenta um mecanismo de validação integrado que verifica a precisão do elemento de IU identificado. O mecanismo avalia a pontuação de confiança do elemento detectado e, se estiver abaixo de um limite predefinido, o sistema inicia uma rodada adicional de processamento e identificação. Esse processo iterativo aumenta a precisão do fallback e evita cliques falsos, garantindo uma automação confiável.
31. O que acontecerá se o fallback de visão não conseguir localizar o elemento da interface do usuário?
Se o Gravador Generativo não puder identificar o elemento da interface do usuário de destino com confiança suficiente, ele priorizará a precisão, falhando de forma controlada em vez de tentar automatizar um elemento incorreto. O sistema exibirá uma mensagem de erro, permitindo que você tome medidas corretivas em vez de prosseguir com a automação não confiável.
32. Os modelos do Gravador Generativo são treinados usando meus dados comerciais?
Não, os dados comerciais do cliente não são usados para treinar modelos do Gravador Generativo.