Trzy warunki, bez których test nic nie mówi
Warunek 1. Czysta sesja
Twoje konto zna Twoje wcześniejsze rozmowy i Twoją lokalizację. Jeśli kiedykolwiek pisałeś do asystenta o swojej firmie, wie o niej i chętniej ją wymieni. Wyloguj się albo otwórz okno prywatne. To pojedyncza zmiana, która najczęściej odwraca wynik.
Warunek 2. Pytanie bez nazwy firmy
Pytanie „czy Piekarnia Pod Zegarem jest dobra" zawsze da odpowiedź zawierającą nazwę Piekarnia Pod Zegarem. To nie jest test, to echo. Pytaj tak, jak pyta klient, który jeszcze nie wie, gdzie pójdzie.
Warunek 3. Powtórzenia
Model generuje odpowiedź od nowa za każdym razem. To samo pytanie zadane dwie minuty później może dać inny zestaw nazw. Bez powtórzeń mierzysz przypadek.
Jak sformułować pytania
Dobre pytanie testowe zawiera nazwę miejsca i potrzebę, a nie zawiera nazwy firmy. Przykłady dla różnych branż:
| Branża | Pytanie testowe |
|---|---|
| Piekarnia | gdzie kupić dobry chleb na zakwasie w Lublinie |
| Dentysta | polecany dentysta na Mokotowie, przyjmujący na NFZ |
| Warsztat | sprawdzony warsztat samochodowy w Rzeszowie |
| Fryzjer | dobry barber w centrum Krakowa bez zapisów |
| Hotel | gdzie się zatrzymać w Zakopanem z psem |
Zwróć uwagę, że każde z nich zawiera dodatkowy warunek: na zakwasie, na NFZ, bez zapisów, z psem. Tak pytają ludzie i tak warto testować, bo to właśnie te warunki decydują, czy model wybierze Ciebie.
Sprawdź na czterech silnikach, nie na jednym
ChatGPT, Gemini, Perplexity i Claude odpowiadają różnie na to samo pytanie, bo korzystają z różnych wyszukiwarek pod spodem. Firma niewidoczna w ChatGPT bywa wymieniana przez Perplexity i odwrotnie.
Perplexity jest przy tym najwygodniejsze do nauki, bo pokazuje przypisy przy każdym zdaniu. Widzisz od razu, z jakiej strony model wziął nazwę konkurenta, i możesz sprawdzić, dlaczego nie wziął Twojej.
Co zapisać
Sam wynik „jestem" albo „nie ma mnie" jest bezużyteczny za miesiąc. Zapisuj:
- pełną treść odpowiedzi, nie tylko to, czy padła nazwa
- datę i godzinę, bo odpowiedzi zmieniają się w czasie
- silnik i numer powtórzenia
- nazwy firm, które padły zamiast Twojej, bo to lista Twojej realnej konkurencji w oczach modelu
Ostatni punkt bywa najbardziej wartościowy. Zwykle okazuje się, że model wymienia zupełnie inne firmy niż te, które uważasz za konkurencję.
Kiedy to zlecić
Dwadzieścia pytań razy trzy powtórzenia razy cztery silniki to 240 odpowiedzi do przeczytania i policzenia. Ręcznie to kilka godzin przy każdym pomiarze, a pomiar trzeba powtarzać, żeby zobaczyć zmianę.
Nasz darmowy skan robi wersję skróconą: trzy pytania do ChatGPT, pełne odpowiedzi z godziną, wynik od razu. Pomiar na czterech silnikach z dwudziestoma pytaniami wchodzi w zakres płatny i opisujemy go na stronie Metoda.