Jak pojawić się w ChatGPT. Najpierw sprawdźcie, czy Wasza strona go nie blokuje

Ktoś pyta ChatGPT, gdzie w okolicy naprawią klimatyzację w samochodzie jeszcze w tym tygodniu. Dostaje trzy warsztaty z linkami do ich stron. Wasz warsztat jest dwie ulice dalej i na liście go nie ma. Wtedy właściciel zaczyna szukać, jak pojawić się w ChatGPT.

Nikt nie wie na pewno, czy ChatGPT poleci Waszą firmę. Ale część rzeczy zależy od Was i można je sprawdzić samemu. Jedna z nich potrafi całkiem wyłączyć stronę z odpowiedzi.

Skąd ChatGPT bierze firmy, które poleca

ChatGPT może odpowiedzieć z tego, czego model nauczył się wcześniej, albo poszukać w internecie. Gdy szuka, pod odpowiedzią widać linki do stron, z których wziął informacje. Przy pytaniu o firmę w okolicy to właśnie te linki są dla Was ważne.

Strony do wyszukiwania i do trenowania zbierają dwa różne roboty OpenAI. Łatwo je pomylić.

OAI-SearchBot zbiera strony do wyszukiwania w ChatGPT. OpenAI pisze wprost, że strony, które go zablokują, nie będą pokazywane w odpowiedziach wyszukiwania ChatGPT. Mogą się pojawić najwyżej jako zwykły link nawigacyjny.

GPTBot zbiera treści do trenowania modeli. Jego zablokowanie to sygnał, że nie chcecie, żeby Wasze teksty służyły do trenowania. Według OpenAI każde z tych ustawień działa niezależnie od drugiego. Można więc wyłączyć trenowanie i zostać w wyszukiwaniu.

Jeden wiersz w robots.txt

Plik robots.txt mówi robotom, czego im nie wolno. Otwórzcie w przeglądarce adres swojej strony, dopiszcie /robots.txt i poszukajcie dwóch zapisów.

Pierwszy to User-agent: OAI-SearchBot z wierszem Disallow: / pod spodem. Taki zapis wyłącza Was z wyszukiwania w ChatGPT. Drugi to User-agent: * z tym samym Disallow: /. Gwiazdka oznacza wszystkie roboty naraz, więc taki zapis zamyka stronę także przed Google.

Bywa, że taki zapis zostaje po pracach nad nową wersją strony. Bywa też, że ktoś „na wszelki wypadek” zablokował wszystkie roboty AI i nie wiedział, że część z nich odpowiada za wyszukiwanie, a nie za trenowanie. Po poprawce OpenAI potrzebuje około doby, żeby ją uwzględnić.

Co jeszcze widzi robot na Waszej stronie, opisaliśmy w tekście Co widzi robot, gdy otwiera Waszą stronę.

Claude też ma osobnego robota do wyszukiwania

Anthropic, firma, która robi Claude, opisuje trzy swoje roboty. ClaudeBot zbiera treści, które mogą posłużyć do trenowania modeli. Claude-User otwiera stronę, gdy ktoś zada Claude pytanie. Claude-SearchBot przegląda strony, żeby wyniki wyszukiwania w Claude były trafniejsze.

Według Anthropic zablokowanie Claude-SearchBot może zmniejszyć widoczność strony w wynikach wyszukiwania dla użytkowników Claude. Zablokowanie Claude-User oznacza, że Claude nie pobierze Waszej strony, nawet gdy użytkownik o to poprosi. ClaudeBot dotyczy trenowania.

Czy pozwolić na trenowanie, to Wasza decyzja, i obie odpowiedzi są w porządku. Roboty od wyszukiwania lepiej jednak zostawić otwarte, jeśli chcecie, żeby asystenci mogli Was znaleźć.

Jak sprawdzić, czy ChatGPT poleca Waszą firmę

Najprostszy test zróbcie ręcznie. Zapytajcie ChatGPT tak, jak zapytałby klient. Nie podawajcie nazwy firmy, tylko opiszcie potrzebę, na przykład „kto w okolicy naprawi klimatyzację w aucie w ten sam dzień”. Dopiszcie miasto albo dzielnicę, bo klient też by to zrobił.

Zobaczcie, kogo asystent wymienia i jakie strony podaje jako źródła. Otwórzcie je i porównajcie ze swoją. Często od razu widać, czego u Was brakuje. Na przykład osobnej podstrony o tej jednej usłudze albo zdania o tym, w jakich dzielnicach pracujecie.

To samo pytanie zadajcie w Claude i w Trybie AI w Google. Odpowiedzi będą się różnić, a ten sam asystent za tydzień może odpowiedzieć inaczej. Zapiszcie więc pytania i wyniki, i powtórzcie test za jakiś czas.

Jak pojawić się w ChatGPT bez sztuczek

Nikt spoza OpenAI nie wie dokładnie, jak ChatGPT wybiera źródła. Jeśli ktoś gwarantuje Wam miejsce w odpowiedziach AI, zapytajcie, skąd to wie.

To, na co macie wpływ, jest dość zwykłe. Roboty od wyszukiwania mają dostęp do strony. Na stronie jest napisane prostymi słowami, co robicie, dla kogo i gdzie. Każda ważna usługa ma swoją podstronę. Profil Firmy w Google jest wypełniony. To samo pomaga w zwykłej wyszukiwarce, więc nic tu nie przepada.

Otwórzcie dziś /robots.txt na swojej stronie i poszukajcie OAI-SearchBot i Claude-SearchBot. Nasz bezpłatny skan strony sprawdzi przy okazji, czy plik nie zamyka strony przed wszystkimi robotami i czy nie blokuje popularnych robotów AI.