Überlegungen für eine optimale Leistung

Sehen Sie sich die Überlegungen zur Erfassung der Leistungsmetriken von IQ Bot-Standardformularen mit einem neuen Modell an, das eine größere Anzahl von Formularen oder Tabellenfeldern enthält.

Testzusammenfassung

  • Im Leistungstest wurden 10000 COVID-Formulardokumente (zwei Seiten pro Dokument = 20000 Seiten) auf einem IQ Bot-Server mit einem einzigen Node und einem Bot-Agent verarbeitet (unter Verwendung des IQ Bot Extraction-Pakets). Dieser Test wurde durchgeführt, um die Leistungsmetriken wie Verarbeitungszeit, Straight-Through Processing (STP), Validierung und verarbeitete Dokumente (Anzahl der erfolgreich verarbeiteten Seiten/Dokumente und Anzahl der fehlgeschlagenen Seiten/Dokumente) zu vergleichen.
  • Neues Modell (WalgreenComplete 3260b299-68b5-4118-87df-b313bd5c30f6) mit 26 Formularfeldern und 8 Tabellenfeldern, die trainiert und zur Extraktion verwendet werden.
  • Mit dem neuen Modell (WalgreenComplete 3260b299-68b5-4118-87df-b313bd5c30f6) wurden alle Dokumente während der Extraktion zur Validierung verschoben. Für STP haben wir die folgenden 5 Felder als optional für diesen Test markiert: A2Patientenunterschrift, B2Datum, B2Unterschrift, Telefonnummer, Versicherungskarte(Tabelle)->Karteninformationen.
  • Die Gesamtzeit für die Verarbeitung von 20000 Seiten mit einem Bot-Agent betrug 25 Stunden, 21 Minuten und 42 Sekunden. Diese basierte auf IQ Bot On-Premises Build 12350.
  • Die durchschnittliche Verarbeitungszeit für eine einzelne Seite mit dem IQ Bot Extraction-Paket auf einem Bot-Agent beträgt ca. 4,56 Sekunden.
  • Erreichtes STP: 100 % und Genauigkeit: 100 %.
  • Während der Testausführung wurden die Anforderungen von den Microsoft-Standardformulardiensten bedient, die in der Region us-west2 gehostet werden.
  • Es wurde bestätigt, dass die in der Region us-west2 unterstützten Microsoft-Team-TPS (Transaktionen pro Sekunde) 100 TPS betrugen.
Anmerkung: KPI (Key-Performance-Indikatoren) wie Verarbeitungszeit, STP, Genauigkeit können je nach Region, in der der Microsoft-Standardformulardienst gehostet wird, und den Transaktionen pro Sekunde (TPS) variieren.

Infrastrukturkonfigurationen

In der folgenden Tabelle sind die Infrastrukturkonfigurationen aufgeführt:
Server Parameter Werte
Server 1 [Webserver] Control Room Windows Server 2019 → 8vCPU, 16 GB RAM, 512 GB Festplatte [Rackspace-Plattform]-uee
Server 2 [Datenbank] Datenbank Windows Server 2019 → 8vCPU, 16 GB RAM, 512 GB Festplatte [Rackspace-Plattform]
Server 3 [Anwendungsserver] IQ Bot Windows Server 2019 → 8vCPU, 16 GB RAM, 512 GB Festplatte [Rackspace-Plattform]
Server 4 [Client] Bot-Agent Windows Server 2019 → 4vCPU, 8 GB RAM, 256 GB Festplatte [Rackspace-Plattform]

Produktkonfigurationen

In der folgenden Tabelle sind die Produktkonfigurationen aufgeführt:
Parameter Werte
Automation Anywhere Enterprise Automation 360 Build 12313
Bot-Agent 21.80.10273
IQ Bot A360.24.28441-20220311
IQ Bot Extraction Paket 1.0.0-20220307-024320
Datenbank Microsoft SQL Server Developer (64 Bit)
Protokoll HTTPS
Netzwerkdienste Nicht-Active Directory

Datenkonfigurationen

In der folgenden Tabelle sind die Datenkonfigurationen aufgeführt:
Parameter Werte
Domäne Standardformulare
Anbieter Formularextraktor Typ 1
Modell WalgreenComplete 3260b299-68b5-4118-87df-b313bd5c30f6
Dokumenttyp Mehrseitiges PDF-Dokument
Seiten Zwei Seiten pro Dokument
Formularfelder 26

[A2Datum, A2Patientenunterschrift, Adresse, Alter, B2Datum, B2Unterschrift, Stadt, Geburtsdatum, E-Mail-Adresse, Vorname, Name der Pflegeeinrichtung, Nachname, Telefonnummer, Name in Druckschrift, Ethnie-Amerikanisch, Ethnie-Asiatisch, Ethnie-Schwarz, Ethnie-Native American, Ethnie-Andere, Ethnie-AngabeNichtMöglich, Ethnie-NichtBekannt, Ethnie-Weiß, AuskunftVerweigert, Staat, ArtDerImpfung, PLZ]

Tabellenfelder 8 Tabellen, 23 Tabellenfelder

Table1: Führerschein[Ausstellungsort, Führerscheinnummer]Tabelle2: Ethnizität[Hispanisch, NichtHispanisch, AngabeNichtMöglich, Unbekannt]Tabelle3: Geschlecht[Weiblich, Männlich]Tabelle4: Versicherungskarte[Karteninformationen, Medizinischer Ausweis, Apothekenausweis]Tabelle5: MedicareInformationen[Medicare, Medicare TeilB]Tabelle6: InhaberDerPatientenkarte[NichtBekannt, Nein, Frage, Ja]Tabelle7: Patiententyp[Assistenzarzt, Personal]Tabelle8: Screeningfragen[NichtBekannt, Nein, Frage, Ja]

Konfiguration COVID-Formulare
Anzahl der Dokumente 10000
Anzahl der Seiten 20000
Sprache English

Testergebnisse

In der folgenden Tabelle sind die Testergebnisse aufgeführt:
Parameter Werte
Hochgeladene Dokumente insgesamt 10000
Hochgeladene Seiten insgesamt 20000
Verarbeitete Dokumente insgesamt 10000
Verarbeitete Seiten insgesamt 20000
Erfolg 10000 Dokumente
Überprüfung ausstehend (Validierung) 0
DDV 100%
Genauigkeit 100%
Verarbeitungszeit 25 Stunden, 21 Minuten und 42 Sekunden

Daten zum Ressourcenverbrauch

Die folgende Tabelle enthält die Daten zum Ressourcenverbrauch:
Parameter CPU-Auslastung in % Speicherauslastung in %
IQ Bot Durchschnitt: 3.4

Maximal: 26.8

Durchschnitt: 70.9

Maximal: 78.9

Control Room Durchschnitt: 1.4

Maximal: 14.5

Durchschnitt: 83.3

Maximal: 84.8

Datenbank Durchschnitt: 3.3

Maximal: 20.6

Durchschnitt: 91.5

Maximal: 94.1

Bot-Agent (Extraktion) Durchschnitt: 4.8

Maximal: 48.9

Durchschnitt: 52.4

Maximal: 58.7