Scénario d’ancrage · 2026-08-13

Localiser la carte du thermostat du Living room dans Smart home

Chaque modèle a reçu la même capture d’écran, le même prompt et le même contrat de réponse structuré.

ID du cascarte du thermostat

390 × 844 · coordonnées normalisées 0–1000

Entrée exacte

Prompt

You are evaluating a user interface screenshot for test automation.

Locate the single UI element described below. Return the best click point and the tight visible bounding box of the complete interactive target. Coordinates use a normalized 0 to 1000 grid, where (0, 0) is the top-left image corner and (1000, 1000) is the bottom-right image corner.

Target: the Living room thermostat card

Return only data matching the supplied JSON schema. Do not describe your reasoning.
SHA-256 · e45ba12168ab7134087b1567977724809af2e05661a681f994187c6169ec2089
Interface Smart home avec la cible de la carte du thermostat du Living room mise en évidenceAttendu
Vérité terrain : la carte du thermostat du salon

Éléments fournis par le modèle

9 réponses

Le bleu indique la cible dérivée du navigateur. L’orange indique le cadre et le point renvoyés par le modèle. La validité du format vérifie uniquement le contrat de réponse ; elle ne signifie pas que l’élément demandé a été trouvé.

Holo3 122B A10B

H Company · holo3-122b-a10b
Clic au point
Format
Valide
IoU des boîtes
0.687
Latence
1.47 s
Coût
$0.00033
Réponse brute
{"point": {"x": 500, "y": 465}, "box": {"x": 50, "y": 435, "width": 950, "height": 50}}

Grok 4.5

xAI · x-ai/grok-4.5
Clic au point
Format
Valide
IoU des boîtes
0.795
Latence
1.48 s
Coût
$0.0021
Réponse brute
{"point": {"x": 500, "y": 455}, "box": {"x": 48, "y": 415, "width": 904, "height": 85}}

GPT-5.4

OpenAI · openai/gpt-5.4
Clic au point
Format
Valide
IoU des boîtes
0.943
Latence
1.98 s
Coût
$0.0031
Réponse brute
{"point":{"x":500,"y":466},"box":{"x":18,"y":432,"width":935,"height":68}}

Gemini 3.6 Flash

Google AI Studio · google/gemini-3.6-flash
Clic au point
Format
Valide
IoU des boîtes
0.987
Latence
1.56 s
Coût
$0.0021
Réponse brute
{"point":{"x":500,"y":466},"box":{"x":46,"y":432,"width":908,"height":69}}

GPT-5.6 Sol

OpenAI · openai/gpt-5.6-sol
Clic au point
Format
Valide
IoU des boîtes
0.458
Latence
1.68 s
Coût
$0.0046
Réponse brute
{"point":{"x":499,"y":492},"box":{"x":47,"y":456,"width":883,"height":72}}

GPT-5.6 Luna

OpenAI · openai/gpt-5.6-luna
Clic au point
Format
Valide
IoU des boîtes
0.993
Latence
2.40 s
Coût
$0.00013
Réponse brute
{"point":{"x":500,"y":466},"box":{"x":46,"y":431,"width":908,"height":70}}

Claude Sonnet 5

Anthropic · anthropic/claude-sonnet-5
Point manqué
Format
Valide
IoU des boîtes
0.000
Latence
3.60 s
Coût
$0.0028
Réponse brute
{"point":{"x":195,"y":394},"box":{"x":18,"y":371,"width":354,"height":47}}

Claude Opus 5

Anthropic · anthropic/claude-opus-5
Point manqué
Format
Valide
IoU des boîtes
0.294
Latence
3.71 s
Coût
$0.0071
Réponse brute
{"point":{"x":500,"y":505},"box":{"x":45,"y":468,"width":910,"height":76}}

Gemini 3.1 Pro Preview

Google AI Studio · google/gemini-3.1-pro-preview
Clic au point
Format
Valide
IoU des boîtes
0.985
Latence
4.41 s
Coût
$0.0030
Réponse brute
{"point": {"x": 500, "y": 466}, "box": 
          {"x": 47, "y": 432, "width": 906, "height": 69}}
FR