Scénario d’ancrage · 2026-08-13

Localiser l’onglet inférieur Trips dans Flight pass

Chaque modèle a reçu la même capture d’écran, le même prompt et le même contrat de réponse structuré.

ID du casonglet voyages

390 × 844 · coordonnées normalisées 0–1000

Entrée exacte

Prompt

You are evaluating a user interface screenshot for test automation.

Locate the single UI element described below. Return the best click point and the tight visible bounding box of the complete interactive target. Coordinates use a normalized 0 to 1000 grid, where (0, 0) is the top-left image corner and (1000, 1000) is the bottom-right image corner.

Target: the Trips bottom tab

Return only data matching the supplied JSON schema. Do not describe your reasoning.
SHA-256 · 1d96dc06fae19da3f70d0c88dbf01916f74d7bf452c3e270a85645c17c36505f
Interface Flight pass avec la cible de l’onglet inférieur Trips mise en évidenceAttendu
Vérité terrain : l’onglet inférieur Trips

Éléments fournis par le modèle

9 réponses

Le bleu indique la cible dérivée du navigateur. L’orange indique le cadre et le point renvoyés par le modèle. La validité du format vérifie uniquement le contrat de réponse ; elle ne signifie pas que l’élément demandé a été trouvé.

Holo3 122B A10B

H Company · holo3-122b-a10b
Clic au point
Format
Valide
IoU des boîtes
0.267
Latence
1.43 s
Coût
$0.00035
Réponse brute
{"point": {"x": 174,  	"y": 961}, "box": {"x": 139, "y": 940, "width": 100, "height": 60}}

Grok 4.5

xAI · x-ai/grok-4.5
Clic au point
Format
Valide
IoU des boîtes
0.386
Latence
1.71 s
Coût
$0.0019
Réponse brute
{"point": {"x": 187, "y": 953}, "box": {"x": 120, "y": 920, "width": 140, "height": 70}}

GPT-5.4

OpenAI · openai/gpt-5.4
Point manqué
Format
Valide
IoU des boîtes
0.000
Latence
2.82 s
Coût
$0.0040
Réponse brute
{"point":{"x":66,"y":812},"box":{"x":0,"y":780,"width":131,"height":64}}

Gemini 3.6 Flash

Google AI Studio · google/gemini-3.6-flash
Point manqué
Format
Invalide
IoU des boîtes
0.000
Latence
3.49 s
Coût
$0.0047
Réponse brute
{
  "point": {
    "x": 185,
    "y": 962
  },
  "box": {
    "x": 150,
    "y": 935,
    "width": 70,

SyntaxError

GPT-5.6 Sol

OpenAI · openai/gpt-5.6-sol
Clic au point
Format
Valide
IoU des boîtes
0.728
Latence
2.70 s
Coût
$0.0069
Réponse brute
{"point":{"x":167,"y":963},"box":{"x":0,"y":925,"width":333,"height":75}}

GPT-5.6 Luna

OpenAI · openai/gpt-5.6-luna
Clic au point
Format
Valide
IoU des boîtes
0.127
Latence
4.75 s
Coût
$0.00029
Réponse brute
{"point":{"x":185,"y":975},"box":{"x":154,"y":944,"width":62,"height":39}}

Claude Sonnet 5

Anthropic · anthropic/claude-sonnet-5
Point manqué
Format
Valide
IoU des boîtes
0.000
Latence
3.97 s
Coût
$0.0028
Réponse brute
{"point":{"x":72,"y":817},"box":{"x":47,"y":793,"width":50,"height":38}}

Claude Opus 5

Anthropic · anthropic/claude-opus-5
Point manqué
Format
Invalide
IoU des boîtes
0.000
Latence
3.41 s
Coût
$0.0072
Réponse brute
{"point":{"x":181,"y":2107},"box":{"x":26,"y":2035,"width":310,"height":144}}

point doit utiliser des coordonnées normalisées comprises entre 0 et 1000. box doit être positive et contenue dans des coordonnées normalisées comprises entre 0 et 1000.

Gemini 3.1 Pro Preview

Google AI Studio · google/gemini-3.1-pro-preview
Clic au point
Format
Valide
IoU des boîtes
0.122
Latence
3.51 s
Coût
$0.0030
Réponse brute
{"point": {"x": 182, "y": 962}, "box": {"x": 155, "y": 943, "width": 57, "height": 41}}
FR