Як потрапити в ChatGPT. Спершу перевірте, чи ваш сайт його не блокує

Хтось питає ChatGPT, де поблизу можуть полагодити кондиціонер в авто ще цього тижня. Отримує три автосервіси з посиланнями на їхні сайти. Ваш сервіс за дві вулиці звідти, і його в списку немає. Тоді власник і починає шукати, як потрапити в ChatGPT.

Ніхто напевно не знає, чи порадить ChatGPT вашу фірму. Але частина речей залежить від вас, і їх можна перевірити самому. Одна з них може повністю прибрати сайт із відповідей.

Звідки ChatGPT бере фірми, які радить

ChatGPT може відповісти з того, чого модель навчилася раніше, або пошукати в інтернеті. Коли він шукає, під відповіддю видно посилання на сторінки, звідки він узяв інформацію. Коли питають про фірму поблизу, саме ці посилання для вас і важливі.

Сторінки для пошуку і для навчання збирають два різні роботи OpenAI. Їх легко сплутати.

OAI-SearchBot збирає сторінки для пошуку в ChatGPT. OpenAI прямо пише, що сайти, які його заблокують, не показуватимуться у відповідях пошуку ChatGPT. Вони можуть з'явитися хіба що як звичайне навігаційне посилання.

GPTBot збирає матеріали для навчання моделей. Якщо його заблокувати, це сигнал, що ви не хочете, щоб ваші тексти йшли на навчання. За словами OpenAI, кожне з цих налаштувань працює незалежно від іншого. Тож можна відмовитися від навчання і лишитися в пошуку.

Один рядок у robots.txt

Файл robots.txt каже роботам, чого їм не можна. Відкрийте в браузері адресу свого сайту, допишіть /robots.txt і пошукайте два записи.

Перший складається з User-agent: OAI-SearchBot і рядка Disallow: / під ним. Такий запис прибирає вас із пошуку ChatGPT. Другий складається з User-agent: * і того самого Disallow: /. Зірочка означає всіх роботів одразу, тож такий запис закриває сайт і від Google.

Буває, що такий запис лишається після роботи над новою версією сайту. Буває й так, що хтось «про всяк випадок» заблокував усіх AI-роботів і не знав, що частина з них відповідає за пошук, а не за навчання. Після виправлення OpenAI потрібно близько доби, щоб це врахувати.

Claude теж має окремого робота для пошуку

Anthropic, компанія, яка робить Claude, описує трьох своїх роботів. ClaudeBot збирає матеріали, які можуть піти на навчання моделей. Claude-User відкриває сторінку, коли хтось ставить Claude питання. Claude-SearchBot переглядає сторінки, щоб результати пошуку в Claude були точнішими.

За словами Anthropic, блокування Claude-SearchBot може зменшити видимість сайту в результатах пошуку для користувачів Claude. Блокування Claude-User означає, що Claude не завантажить вашу сторінку, навіть коли користувач про це попросить. ClaudeBot стосується навчання.

Дозволяти навчання чи ні, вирішуєте ви, і обидві відповіді нормальні. Але роботів для пошуку краще лишити відкритими, якщо ви хочете, щоб асистенти могли вас знайти.

Як перевірити, чи ChatGPT радить вашу фірму

Найпростіший тест зробіть вручну. Спитайте ChatGPT так, як спитав би клієнт. Не називайте фірму, а опишіть потребу, наприклад «хто поблизу полагодить кондиціонер в авто в той самий день». Додайте місто чи район, бо клієнт теж би так зробив.

Подивіться, кого асистент називає і які сторінки дає як джерела. Відкрийте їх і порівняйте зі своєю. Часто одразу видно, чого бракує у вас. Наприклад, окремої сторінки про цю одну послугу чи речення про те, в яких районах ви працюєте.

Те саме питання поставте в Claude і в AI Mode у Google. Відповіді будуть різні, а той самий асистент за тиждень може відповісти інакше. Тож запишіть питання й результати і повторіть тест через якийсь час.

Як потрапити в ChatGPT без трюків

Ніхто поза OpenAI точно не знає, як ChatGPT вибирає джерела. Якщо хтось гарантує вам місце у відповідях AI, спитайте, звідки він це знає.

Те, на що ви можете вплинути, доволі звичайне. Роботи пошуку мають доступ до сайту. На сайті простими словами написано, що ви робите, для кого і де. Кожна важлива послуга має свою сторінку. Профіль компанії в Google заповнений. Те саме допомагає і в звичайному пошуку, тож нічого не пропаде.

Відкрийте сьогодні /robots.txt на своєму сайті й пошукайте OAI-SearchBot і Claude-SearchBot. Наш безплатний скан сайту заодно перевірить, чи файл не закриває сайт від усіх роботів і чи не блокує поширених AI-роботів.