Ein Ablauf verarbeitet 100 Anfragen. 70 Entwürfe werden im ersten Versuch akzeptiert; bei 20 ist ein zweiter Aufruf nötig; zehn gehen vollständig zurück an die Sachbearbeitung. Ein Preis je Aufruf sagt wenig über den Preis eines nutzbaren Ergebnisses.
Eine Messung pro Vorgang
Erfassen Sie je Vorgangs-ID Zahl der Modellaufrufe, abrechenbare Einheiten laut Anbieter, Zeit bis zum ersten Entwurf, Zeit bis zur Entscheidung und aktive menschliche Bearbeitung. Trennen Sie erfolgreiche Entwürfe von abgelehnten. Wenn ein Probelauf 90 freigegebene Entwürfe liefert, teilen Sie die gesamten gemessenen Aufwendungen dieses Versuchs durch 90 und weisen Sie die zehn manuell bearbeiteten Fälle separat aus. So bleiben Abbrüche sichtbar.
Messen Sie Routine, Ausnahme und Stoßzeit getrennt. Eine zeitweise Warteschlange erhöht die Gesamtdauer auch dann, wenn der Modellaufruf gleich schnell bleibt. Traces können einzelne Abschnitte mit Zeitstempeln abbilden. Für kleine Piloten reicht oft eine Tabelle mit einer Zeile pro Vorgang.
Vergleich erst mit gleichen Bedingungen
Nutzen Sie für Modellvarianten dieselbe Testmenge, prüfen Sie dieselben Qualitätskriterien und beziehen Sie Konditionen aus der tatsächlichen Abrechnung. Berichten Sie das Ergebnis mit Datum und Volumen. Ein einzelner Probelauf ist keine Prognose für das nächste Quartal. AI TOOLS hilft, Kandidaten für einen Vergleich zu finden.