Setup Multimedia-Verarbeitung¶

Die Multimedia-Einstellungen konfigurieren Testschritte, die ecu.test agent während der Testausführung für die Bildverarbeitung nutzen, beispielsweise zur Ermittlung von Touchkoordinaten aus einem Prompt. Das gewählte Modell muss Bildeingaben unterstützen.

Diese Einstellungen werden verwendet von:

Öffne Optionen ‣ Einstellungen ‣ ecu.test agent ‣ Multimedia-Einstellungen.

Modellanfrage parametrieren¶

Die wirksame Modellanfrage wird zunächst als schreibgeschütztes YAML angezeigt. Klicke auf Edit, um sie zu ändern.

Der Bearbeitungsdialog enthält:

Model: Wähle ein verfügbares Modell oder gib einen Modellnamen ein. Über die Aktualisieren-Schaltfläche werden verfügbare Modelle vom Service abgerufen.
Override (editable YAML): Gib nur Werte ein, die ihre Standardwerte überschreiben sollen. Der Inhalt wird während der Bearbeitung validiert; nur gültige Einstellungen können gespeichert werden.
Effective Preview (read only): Zeigt die resultierende Konfiguration nach Anwendung der Standardwerte und Overrides.

Mit Import lädst du ein Override aus einer YAML-Datei, mit Export speicherst du das aktuelle Override. Importiertes YAML muss gültig sein und request.model enthalten.

Unterstützte YAML-Felder¶

request.model: Modell für die Agent-basierte Multimedia-Verarbeitung.
request.temperature: Sampling-Temperatur von 0.0 bis 1.0. Niedrigere Werte erzeugen deterministischere Ergebnisse. Höhere Werte erhöhen die Variation, können koordinatenabhängige Ergebnisse aber weniger konsistent machen.
imagePreprocessing.resizeEnabled: Aktiviert die automatische Verkleinerung vor dem Senden eines Bildes an das Modell. Das kann Latenz und Token-Verbrauch reduzieren und ermöglicht die Rückskalierung von Koordinaten.
imagePreprocessing.maxEdgeLength: Maximale Bildkantenlänge in Pixeln von 128 bis 16384 bei aktivierter Skalierung.
resultPostProcessing.relativeCoordsEnabled: Aktiviert die Umrechnung von relativ zu einer modellspezifischen Referenzgröße zurückgegebenen Koordinaten.
resultPostProcessing.relativeCoordsScale: Referenzkantenlänge von 10 bis 16384 für relative Koordinaten, beispielsweise 1000 bei Koordinaten im Bereich von 0 bis 1000.
modelInstructions: Sortierte Liste von Textdateien mit zusätzlichen Modellanweisungen. Relative Pfade werden gegen den Workspace aufgelöst, absolute Pfade direkt verwendet. Jeder Eintrag muss ein nicht leerer Pfad zu einer vorhandenen Datei sein.

Info

Die automatische Skalierung wird empfohlen, wenn das Modell Bilder intern skaliert, die zurückgegebenen Koordinaten aber nicht anpasst.

Beispiel¶

request:
  model: gpt-4.1-mini
  temperature: 0.2
imagePreprocessing:
  resizeEnabled: true
  maxEdgeLength: 1200
resultPostProcessing:
  relativeCoordsEnabled: false
  relativeCoordsScale: 1000
modelInstructions: [instructions/modelInstructions.md, instructions/projectRules.md]

Multimedia-Cache¶

Ergebnisse der Agent-basierten Multimedia-Verarbeitung können für die Wiederverwendung während der Testausführung zwischengespeichert werden. Mit Delete Multimedia Cache löschst du alle zwischengespeicherten Ergebnisse. Bei folgenden Ausführungen werden neue Ergebnisse vom Agent-Service abgerufen.