Scénario d’ancrage · 2026-08-13

Localiser le bouton bascule du mode Automatic dans le centre de contrôle IoT

Chaque modèle a reçu la même capture d’écran, le même prompt et le même contrat de réponse structuré.

ID du casmode automatique

1440 × 900 · coordonnées normalisées 0–1000

Entrée exacte

Prompt

You are evaluating a user interface screenshot for test automation.

Locate the single UI element described below. Return the best click point and the tight visible bounding box of the complete interactive target. Coordinates use a normalized 0 to 1000 grid, where (0, 0) is the top-left image corner and (1000, 1000) is the bottom-right image corner.

Target: the Automatic mode toggle

Return only data matching the supplied JSON schema. Do not describe your reasoning.
SHA-256 · e0541f383d8a9340c5b517c3c28825c477215369ee24ee0230b57ff93b38d029
Interface du centre de contrôle IoT avec la cible du bouton bascule du mode Automatic mise en évidenceAttendu
Vérité terrain : le bouton bascule du mode automatique

Éléments fournis par le modèle

9 réponses

Le bleu indique la cible dérivée du navigateur. L’orange indique le cadre et le point renvoyés par le modèle. La validité du format vérifie uniquement le contrat de réponse ; elle ne signifie pas que l’élément demandé a été trouvé.

Holo3 122B A10B

H Company · holo3-122b-a10b
Clic au point
Format
Valide
IoU des boîtes
0.216
Latence
2.51 s
Coût
$0.00072
Réponse brute
{"point": {"x": 210, "y": 430}, "box": {"x": 188, "y": 391, "width": 330, "height": 47}}

Grok 4.5

xAI · x-ai/grok-4.5
Clic au point
Format
Valide
IoU des boîtes
0.392
Latence
1.61 s
Coût
$0.0038
Réponse brute
{"point": {"x": 265, "y": 425}, "box": {"x": 230, "y": 405, "width": 175, "height": 40}}

GPT-5.4

OpenAI · openai/gpt-5.4
Clic au point
Format
Valide
IoU des boîtes
0.000
Latence
3.07 s
Coût
$0.0065
Réponse brute
{"point":{"x":303,"y":428},"box":{"x":291,"y":378,"width":164,"height":28}}

Gemini 3.6 Flash

Google AI Studio · google/gemini-3.6-flash
Point manqué
Format
Invalide
IoU des boîtes
0.000
Latence
3.79 s
Coût
$0.0047
Réponse brute
{"point":{"x":266,"

SyntaxError

GPT-5.6 Sol

OpenAI · openai/gpt-5.6-sol
Clic au point
Format
Valide
IoU des boîtes
0.040
Latence
3.77 s
Coût
$0.0181
Réponse brute
{"point":{"x":209.4,"y":430.6},"box":{"x":203.5,"y":421.1,"width":11.8,"height":18.9}}

GPT-5.6 Luna

OpenAI · openai/gpt-5.6-luna
Clic au point
Format
Valide
IoU des boîtes
0.041
Latence
3.77 s
Coût
$0.00033
Réponse brute
{"point":{"x":209,"y":431},"box":{"x":203,"y":421,"width":12,"height":19}}

Claude Sonnet 5

Anthropic · anthropic/claude-sonnet-5
Point manqué
Format
Valide
IoU des boîtes
0.000
Latence
3.58 s
Coût
$0.0054
Réponse brute
{"point":{"x":301,"y":388},"box":{"x":293,"y":380,"width":16,"height":16}}

Claude Opus 5

Anthropic · anthropic/claude-opus-5
Clic au point
Format
Valide
IoU des boîtes
0.598
Latence
3.87 s
Coût
$0.0135
Réponse brute
{"point":{"x":209,"y":430},"box":{"x":202,"y":417,"width":126,"height":27}}

Gemini 3.1 Pro Preview

Google AI Studio · google/gemini-3.1-pro-preview
Clic au point
Format
Valide
IoU des boîtes
0.424
Latence
3.71 s
Coût
$0.0031
Réponse brute
{"point": {"x": 265, "y": 427}, "box": {"x": 201, "y": 418, "width": 128, "height": 19}}
FR