Dacă plătești un abonament de monitorizare a vizibilității în AI, tabloul de bord îți arată în ce răspunsuri apari.
Nu îți arată ce vede clientul tău.
Nu pentru că instrumentul e prost sau pentru că cineva te minte. Pentru că măsoară alt canal, iar diferența dintre cele două e mult mai mare decât se presupune.
Am măsurat-o în studiul nostru pe 480 de întrebări, pentru că aveam nevoie să știm cât valorează propriile noastre cifre.
Cum funcționează un instrument de monitorizare
Aproape toate interoghează motoarele prin API. E singura cale prin care poți pune mii de întrebări pe lună, automat, fără să stea cineva să tasteze.
Clientul tău nu folosește API-ul. Deschide aplicația, scrie o întrebare, citește răspunsul.
Întrebarea e dacă cele două produc același răspuns. Presupunerea din piață e că da, cu mici variații. Am verificat.
Cifra
Am rulat aceleași întrebări în ambele feluri și am comparat numele recomandate: 44 de perechi valide, din 48 posibile.
S-au potrivit în 37% din cazuri.
Cifra singură nu spune nimic. Motoarele AI variază oricum de la o rulare la alta, deci trebuia să știm cât din diferență e canal și cât e simplu zgomot.
Așa că am măsurat și linia de bază: cât e de acord API-ul cu el însuși, la aceeași întrebare, pe rulări diferite.
| Motor | Acord aplicație vs. API | Acord API cu el însuși |
|---|---|---|
| Perplexity | 26% | 91% |
| ChatGPT | 29% | 67% |
| Claude | 40% | 80% |
| Gemini | 61% | 84% |
| Total | 37% |
Perplexity e cazul care lămurește tot: e cel mai consecvent motor cu el însuși, 91%, și în același timp cel mai divergent între canale, 26%. Dacă diferența ar veni din aleatoriul modelului, cifrele astea două n-ar putea coexista.
Nu vine de acolo. Vine din canal.
Partea pe care nu am văzut-o explicată nicăieri
Ne așteptam ca diferența să fie de conținut: alte nume, alte surse. E și asta. Dar o bună parte e de format, iar asta schimbă felul în care înțelegi cifra.
Din 47 de capturi de ecran din aplicații, 30 arătau recomandările într-o hartă sau într-o listă interactivă, nu în text. Toate cele de la Claude, majoritatea celor de la ChatGPT și Perplexity.
Prin API, aceleași motoare răspund cu text.
Deci o parte din „dezacord” înseamnă că motorul chiar recomandă pe cineva, dar îl livrează într-un card pe care un instrument automat nu îl citește ca atare. Numele există. E doar în altă formă.
Pentru un business local, asta contează dublu, fiindcă exact în hărți ajungi să apari sau să lipsești, iar acolo nu numele contează, ci profilul.
Unde ne-am înșelat noi întâi
Prima variantă a analizei spunea că Claude refuză să recomande în 42% din cazuri. Am fi putut publica asta. Suna bine, era o constatare tare.
Era greșită.
Recalculând din capturile de ecran, în loc de textul lipit din ele, rata de refuz a ieșit zero. Toate cele 12 rulări aveau recomandări nominale, livrate pe hărți interactive, ale căror nume nu ajunseseră în textul copiat.
Constatarea corectă nu e „Claude refuză”. E „Claude răspunde în aplicație prin artefacte interactive, iar prin API prin text”.
Scriem asta aici pentru că e exact eroarea pe care o face și un instrument automat, la scară, în fiecare zi, fără să o corecteze nimeni.
Ce poți și ce nu poți cere unui instrument
Nu concluzia e că instrumentele sunt inutile. E că sunt bune la altceva decât se vinde.
Pentru ce merită plătite: urmărirea unei tendințe în timp, pe volum mare de întrebări. Dacă apari în 12% din răspunsuri în ianuarie și în 19% în iunie, la aceleași întrebări, direcția aia e reală și nu o poți obține manual. Aici instrumentul nu are înlocuitor.
Pentru ce nu: ca dovadă a ceea ce vede clientul tău când deschide aplicația. Pentru asta, singura măsurătoare validă e cea făcută în aplicație, iar protocolul manual de 30 de minute pe lună e suficient pentru un business mic.
Cele două nu se substituie. Măsoară lucruri diferite, iar prețul se plătește de obicei pentru primul cu argumentele celui de-al doilea.
Trei întrebări de pus înainte să semnezi
„Măsurați prin API sau în interfață?” Dacă răspunsul e API, e în regulă, dar atunci raportul nu are voie să spună „ce văd clienții tăi”.
„Cum tratați răspunsurile care vin în hărți sau carduri?” Dacă întrebarea îi surprinde, ai aflat ceva.
„Care e linia voastră de bază?” Orice procent de vizibilitate fără o măsură a variației proprii e un număr fără scară. Al nostru e 67-91%, măsurat. Întreabă-l pe al lor.
Limitele măsurătorii noastre
Aceleași reguli le aplicăm și nouă.
44 de perechi e puțin. Ajunge ca să arate că divergența e mare și reală, nu ajunge ca să dea o cifră fină per motor. Gemini stă pe doar 8 rulări, deci acel 61% e cel mai fragil număr din tabel.
Rulările manuale s-au făcut la o zi după cele prin API. O zi contează mai puțin decât canalul, dar nu e zero.
Numele de pe hărțile interactive apar uneori trunchiate în captură, iar potrivirea pe prefix compensează doar parțial.
Nu am putut garanta delogarea la motoarele care cer cont obligatoriu.
Cifra de 37% e solidă ca ordin de mărime și ca direcție. Nu ar trebui citată la virgulă, nici de noi, nici de altcineva.
Ce facem noi cu asta
Studiul nostru măsoară ce răspund motoarele prin API, cu căutare web activată. Frecvențele agregate rămân valide ca măsură de vizibilitate pe fiecare ecosistem.
Când vorbim despre ce vede omul în aplicație, o spunem cu acordul de 37% declarat alături. De fiecare dată, inclusiv când nu ne convine.
E aceeași regulă pe care o cerem oricui vinde cifre, deci ar fi ciudat să nu o respectăm.
Dacă vrei să ne uităm împreună la ce arată instrumentul tău față de ce arată aplicația, pe cazul tău, hai la o discuție de 30 de minute.
Vrei să afli cum apari tu în răspunsurile AI? Programează o discuție strategică.
