Jak działa test
Zadaję czterem modelom językowym dwa pytania. Pierwsze brzmi tak, jak pytałby klient: kogo polecasz w tej kategorii i w tym mieście. Drugie dotyczy wprost Twojej marki: co model o niej wie. Potem sprawdzam w odpowiedziach:
- czy model wymienia markę albo jej domenę wśród poleceń i na którym miejscu listy,
- czy opisuje markę, czy przyznaje, że jej nie zna,
- kogo poleca zamiast Ciebie, czyli które domeny powtarzają się w odpowiedziach,
- na jakie źródła powołuje się model z wyszukiwaniem i czy jest wśród nich Twoja strona.
| Model | Skąd bierze wiedzę |
|---|---|
| OpenAI GPT-6 Luna | dane treningowe, bez wyszukiwania |
| Claude Haiku 5.5 | dane treningowe, bez wyszukiwania |
| Gemini 3.5 Flash-Lite | dane treningowe, bez wyszukiwania |
| Perplexity Sonar | wyszukiwanie w sieci w trakcie odpowiedzi |
Modele bez wyszukiwania pokazują, co o marce utrwaliło się w danych treningowych. Model z wyszukiwaniem pokazuje, co znajdzie w sieci tu i teraz. Mała firma zwykle wypada lepiej w drugim przypadku, bo do danych treningowych trafia głównie to, o czym w sieci pisze się dużo i od dawna.
Czego test nie pokaże
- Odpowiedzi ChatGPT, Gemini i Claude w aplikacjach. Aplikacje korzystają z większych modeli, z wyszukiwania w sieci i z historii rozmów użytkownika. Test używa tańszych modeli przez API, więc pokazuje kierunek, a nie dokładnie to, co zobaczy klient.
- Stałego wyniku. Modele odpowiadają za każdym razem trochę inaczej. Jeden test to migawka. Widoczność marki mierzy się powtarzając wiele pytań przez kilka tygodni.
- Prawdziwości opisu. Narzędzie rozpoznaje, czy model opisuje markę, ale nie sprawdza, czy opis jest prawdziwy. Przeczytaj odpowiedzi.