Grounding-Szenario · 2026-08-13

Das Eingabefeld „Katalog durchsuchen“ im Commerce-Katalog lokalisieren

Jedes Modell erhielt denselben Screenshot, Prompt und Vertrag für die strukturierte Antwort.

Fall-IDKatalogsuche

1440 × 900 · normalisierte Koordinaten von 0–1000

Exakte Eingabe

Prompt

You are evaluating a user interface screenshot for test automation.

Locate the single UI element described below. Return the best click point and the tight visible bounding box of the complete interactive target. Coordinates use a normalized 0 to 1000 grid, where (0, 0) is the top-left image corner and (1000, 1000) is the bottom-right image corner.

Target: the Search catalog input

Return only data matching the supplied JSON schema. Do not describe your reasoning.
SHA-256 · 0ec5c70ab58080e66f60be3f39bd6bc4364d2c3f7438e4ffc3c93630000e82f2
Commerce-Katalogoberfläche mit hervorgehobenem Ziel „Katalog durchsuchen“Erwartet
Referenzposition: das Eingabefeld „Search catalog“

Modelldaten

9 Antworten

Blau markiert das aus dem Browser abgeleitete Ziel. Orange markiert die vom Modell zurückgegebene Box und den Punkt. Die Formatvalidierung prüft nur den Antwortvertrag; sie bedeutet nicht, dass das angeforderte Element gefunden wurde.

Holo3 122B A10B

H Company · holo3-122b-a10b
Punkt getroffen
Format
Gültig
Box-IoU
0.463
Latenz
1.69 s
Kosten
$0.00072
Rohe Antwort
{"point": {"x": 312,  	"y": 420}, "box": {"x": 206, "y": 400, "width": 441, "height": 44}}

Grok 4.5

xAI · x-ai/grok-4.5
Punkt verfehlt
Format
Gültig
Box-IoU
0.000
Latenz
1.60 s
Kosten
$0.0038
Rohe Antwort
{"point": {"x": 312, "y": 375}, "box": {"x": 218, "y": 355, "width": 188, "height": 40}}

GPT-5.4

OpenAI · openai/gpt-5.4
Punkt getroffen
Format
Gültig
Box-IoU
0.823
Latenz
2.85 s
Kosten
$0.0066
Rohe Antwort
{"point":{"x":325,"y":423},"box":{"x":206,"y":400,"width":236,"height":46}}

Gemini 3.6 Flash

Google AI Studio · google/gemini-3.6-flash
Punkt getroffen
Format
Gültig
Box-IoU
0.843
Latenz
1.39 s
Kosten
$0.0021
Rohe Antwort
{"point":{"x":324,"y":422},"box":{"x":206,"y":399,"width":236,"height":46}}

GPT-5.6 Sol

OpenAI · openai/gpt-5.6-sol
Punkt getroffen
Format
Gültig
Box-IoU
0.825
Latenz
2.12 s
Kosten
$0.0126
Rohe Antwort
{"point":{"x":324,"y":422},"box":{"x":206,"y":399,"width":236,"height":47}}

GPT-5.6 Luna

OpenAI · openai/gpt-5.6-luna
Punkt getroffen
Format
Gültig
Box-IoU
0.825
Latenz
2.90 s
Kosten
$0.00029
Rohe Antwort
{"point":{"x":324,"y":422},"box":{"x":206,"y":399,"width":236,"height":47}}

Claude Sonnet 5

Anthropic · anthropic/claude-sonnet-5
Punkt verfehlt
Format
Gültig
Box-IoU
0.000
Latenz
3.58 s
Kosten
$0.0054
Rohe Antwort
{"point":{"x":466,"y":380},"box":{"x":283,"y":362,"width":367,"height":36}}

Claude Opus 5

Anthropic · anthropic/claude-opus-5
Punkt getroffen
Format
Gültig
Box-IoU
0.861
Latenz
3.45 s
Kosten
$0.0135
Rohe Antwort
{"point":{"x":324,"y":422},"box":{"x":206,"y":399,"width":236,"height":45}}

Gemini 3.1 Pro Preview

Google AI Studio · google/gemini-3.1-pro-preview
Punkt getroffen
Format
Gültig
Box-IoU
0.861
Latenz
6.04 s
Kosten
$0.0030
Rohe Antwort
{"point": {"x": 324, "y": 421}, "box": {"x": 206, "y": 399, "width": 236, "height": 45}}
DE