Grounding-Szenario · 2026-08-13

Zeile „Cooling pump“ mit dem Status „Online“ in der IoT-Steuerzentrale lokalisieren

Jedes Modell erhielt denselben Screenshot, Prompt und Vertrag für die strukturierte Antwort.

Fall-IDPumpenkarte

1440 × 900 · normalisierte Koordinaten von 0–1000

Exakte Eingabe

Prompt

You are evaluating a user interface screenshot for test automation.

Locate the single UI element described below. Return the best click point and the tight visible bounding box of the complete interactive target. Coordinates use a normalized 0 to 1000 grid, where (0, 0) is the top-left image corner and (1000, 1000) is the bottom-right image corner.

Target: the Cooling pump row with Online status

Return only data matching the supplied JSON schema. Do not describe your reasoning.
SHA-256 · ed46d65a867bf9c5b1c1ca464b5992add5304512bdb8d55b8ac7e75243339b2f
Oberfläche der IoT-Steuerzentrale mit hervorgehobenem Ziel der Zeile „Cooling pump“ mit dem Status „Online“Erwartet
Referenz: die Zeile der Kühlpumpe mit dem Status „Online“

Modelldaten

9 Antworten

Blau markiert das aus dem Browser abgeleitete Ziel. Orange markiert die vom Modell zurückgegebene Box und den Punkt. Die Formatvalidierung prüft nur den Antwortvertrag; sie bedeutet nicht, dass das angeforderte Element gefunden wurde.

Holo3 122B A10B

H Company · holo3-122b-a10b
Punkt verfehlt
Format
Ungültig
Box-IoU
0.000
Latenz
1.65 s
Kosten
$0.00069
Rohe Antwort
{"point":{"x":246,"y":555},"box":		{"x":188,"y":517,"width":972,"height":59}}

Die Box muss positiv und in normalisierten Koordinaten von 0..1000 enthalten sein.

Grok 4.5

xAI · x-ai/grok-4.5
Punkt verfehlt
Format
Gültig
Box-IoU
0.147
Latenz
1.71 s
Kosten
$0.0038
Rohe Antwort
{"point": {"x": 520, "y": 615}, "box": {"x": 220, "y": 575, "width": 730, "height": 75}}

GPT-5.4

OpenAI · openai/gpt-5.4
Punkt verfehlt
Format
Gültig
Box-IoU
0.146
Latenz
2.89 s
Kosten
$0.0061
Rohe Antwort
{"point":{"x":582,"y":500},"box":{"x":271,"y":465,"width":702,"height":71}}

Gemini 3.6 Flash

Google AI Studio · google/gemini-3.6-flash
Punkt getroffen
Format
Gültig
Box-IoU
0.976
Latenz
1.20 s
Kosten
$0.0021
Rohe Antwort
{"point":{"x":580,"y":556},"box":{"x":188,"y":516,"width":784,"height":81}}

GPT-5.6 Sol

OpenAI · openai/gpt-5.6-sol
Punkt getroffen
Format
Gültig
Box-IoU
0.976
Latenz
3.96 s
Kosten
$0.0143
Rohe Antwort
{"point":{"x":579,"y":556},"box":{"x":188,"y":517,"width":784,"height":79}}

GPT-5.6 Luna

OpenAI · openai/gpt-5.6-luna
Punkt getroffen
Format
Gültig
Box-IoU
0.976
Latenz
2.83 s
Kosten
$0.00033
Rohe Antwort
{"point":{"x":580,"y":556},"box":{"x":188,"y":517,"width":784,"height":79}}

Claude Sonnet 5

Anthropic · anthropic/claude-sonnet-5
Punkt verfehlt
Format
Ungültig
Box-IoU
0.000
Latenz
3.69 s
Kosten
$0.0054
Rohe Antwort
{"point":{"x":835,"y":500},"box":{"x":270,"y":479,"width":1129,"height":42}}

Die Box muss positiv und in normalisierten Koordinaten von 0..1000 enthalten sein.

Claude Opus 5

Anthropic · anthropic/claude-opus-5
Punkt verfehlt
Format
Gültig
Box-IoU
0.156
Latenz
4.46 s
Kosten
$0.0135
Rohe Antwort
{"point":{"x":583,"y":500},"box":{"x":188,"y":465,"width":781,"height":71}}

Gemini 3.1 Pro Preview

Google AI Studio · google/gemini-3.1-pro-preview
Punkt verfehlt
Format
Ungültig
Box-IoU
0.000
Latenz
27.79 s
Kosten
$0.0031
Rohe Antwort
{"point": {"x": 579, "y": 556}, "box": {"x": 188, "y": 516, "width": 971, "height": 80}}

Die Box muss positiv und in normalisierten Koordinaten von 0..1000 enthalten sein.

DE