Grounding-Szenario · 2026-08-13

Eingabefeld „Search rooms“ im Smart Home lokalisieren

Jedes Modell erhielt denselben Screenshot, Prompt und Vertrag für die strukturierte Antwort.

Fall-IDRaumsuche

390 × 844 · normalisierte Koordinaten von 0–1000

Exakte Eingabe

Prompt

You are evaluating a user interface screenshot for test automation.

Locate the single UI element described below. Return the best click point and the tight visible bounding box of the complete interactive target. Coordinates use a normalized 0 to 1000 grid, where (0, 0) is the top-left image corner and (1000, 1000) is the bottom-right image corner.

Target: the Search rooms input

Return only data matching the supplied JSON schema. Do not describe your reasoning.
SHA-256 · e9b67c5998c1b5c4ab14d2609b2b66cb452ac1a3ff8dd5e1f37d6f56e45ff0b1
Smart-Home-Oberfläche mit hervorgehobenem Ziel des Eingabefelds „Search rooms“Erwartet
Referenz: das Eingabefeld „Räume suchen“

Modelldaten

9 Antworten

Blau markiert das aus dem Browser abgeleitete Ziel. Orange markiert die vom Modell zurückgegebene Box und den Punkt. Die Formatvalidierung prüft nur den Antwortvertrag; sie bedeutet nicht, dass das angeforderte Element gefunden wurde.

Holo3 122B A10B

H Company · holo3-122b-a10b
Punkt getroffen
Format
Gültig
Box-IoU
0.247
Latenz
1.46 s
Kosten
$0.00034
Rohe Antwort
{"point": {"x": 498,  	"y": 147}, "box": {"x": 47, "y": 125, "width": 953, "height": 169}}

Grok 4.5

xAI · x-ai/grok-4.5
Punkt getroffen
Format
Gültig
Box-IoU
0.619
Latenz
1.39 s
Kosten
$0.0012
Rohe Antwort
{"point": {"x": 500, "y": 160}, "box": {"x": 40, "y": 130, "width": 920, "height": 60}}

GPT-5.4

OpenAI · openai/gpt-5.4
Punkt getroffen
Format
Gültig
Box-IoU
0.408
Latenz
2.07 s
Kosten
$0.0025
Rohe Antwort
{"point":{"x":250,"y":152},"box":{"x":18,"y":107,"width":938,"height":50}}

Gemini 3.6 Flash

Google AI Studio · google/gemini-3.6-flash
Punkt getroffen
Format
Gültig
Box-IoU
0.866
Latenz
1.19 s
Kosten
$0.0021
Rohe Antwort
{"point":{"x":500,"y":150},"box":{"x":46,"y":125,"width":908,"height":50}}

GPT-5.6 Sol

OpenAI · openai/gpt-5.6-sol
Punkt getroffen
Format
Gültig
Box-IoU
0.864
Latenz
3.15 s
Kosten
$0.0064
Rohe Antwort
{"point":{"x":500,"y":150},"box":{"x":46,"y":126,"width":908,"height":50}}

GPT-5.6 Luna

OpenAI · openai/gpt-5.6-luna
Punkt getroffen
Format
Gültig
Box-IoU
0.864
Latenz
2.18 s
Kosten
$0.00014
Rohe Antwort
{"point":{"x":500,"y":151},"box":{"x":46,"y":126,"width":908,"height":50}}

Claude Sonnet 5

Anthropic · anthropic/claude-sonnet-5
Punkt getroffen
Format
Gültig
Box-IoU
0.088
Latenz
3.55 s
Kosten
$0.0028
Rohe Antwort
{"point":{"x":195,"y":127},"box":{"x":18,"y":112,"width":354,"height":30}}

Claude Opus 5

Anthropic · anthropic/claude-opus-5
Punkt verfehlt
Format
Gültig
Box-IoU
0.000
Latenz
3.98 s
Kosten
$0.0071
Rohe Antwort
{"point":{"x":500,"y":325},"box":{"x":43,"y":283,"width":913,"height":83}}

Gemini 3.1 Pro Preview

Google AI Studio · google/gemini-3.1-pro-preview
Punkt getroffen
Format
Gültig
Box-IoU
0.839
Latenz
20.55 s
Kosten
$0.0030
Rohe Antwort
{"point": {"x": 500, "y": 149}, "box": {"x": 47, "y": 126, "width": 907, "height": 47}}
DE