GEO оптимизация: как да те цитира ChatGPT (и защо llms.txt няма да те спаси)

Какво е GEO оптимизация

GEO е съкращение от Generative Engine Optimization, оптимизация за генеративни търсачки. Терминът идва от научна статия на група изследователи, приета на конференцията KDD 2024. Генеративната търсачка не показва списък с връзки. Тя сама пише отговор и цитира няколко източника, а целта на GEO е вашата страница да е сред тях.

Авторите пробват различни начини за пренаписване на текст и мерят колко от него се вижда в генерирания отговор. В тяхната тестова среда най-добрите методи увеличават видимостта с до около 40%. Помагат цитатите, статистиката и препратките към източници. Натъпкването на ключови думи не помага, а резултатът е дори малко под този на непроменения текст.

Това е опит със симулирана търсачка и не гарантира нищо за ChatGPT. Посоката обаче е логична: AI цитира текст, в който има конкретни и проверими неща.

Първо проверете дали сайтът ви не блокира роботите на ChatGPT

Преди да пипате текстовете, проверете техническата страна. Много сайтове спират AI роботите изцяло „за всеки случай“, а после се чудят защо ChatGPT не ги цитира.

Роботът (на английски crawler или bot) е програма, която обикаля сайтовете и чете страниците им. OpenAI има три такива и всеки върши различна работа.

OAI-SearchBot обхожда сайтове, за да може ChatGPT да ги показва и цитира, когато търси в интернет. Ако го спрете, няма как да се появите в тези отговори.

GPTBot събира текстове, които може да се използват за обучение на моделите на OpenAI. Той не решава дали ще ви цитират в търсенето.

ChatGPT-User не обикаля сам. Появява се, когато потребител помоли ChatGPT да отвори конкретна страница.

Кой робот какво може, се решава във файла robots.txt. Това е обикновен текстов файл в корена на сайта. Виждате го, като добавите /robots.txt след адреса на сайта, например example.bg/robots.txt. Потърсете в него редовете „User-agent: OAI-SearchBot“ и „User-agent: GPTBot“. Ако под някой от тях пише „Disallow: /“, този робот е спрян за целия сайт. Същото важи, ако „Disallow: /“ стои под „User-agent: *“, което означава „всички роботи“. Ако имената им не се споменават и няма обща забрана, роботите са допуснати.

Според документацията на OpenAI, за да се появявате в отговорите на ChatGPT с търсене, OAI-SearchBot трябва да е разрешен. Можете да го допуснете и в същото време да спрете GPTBot. Тогава участвате в търсенето, но текстовете ви не отиват за обучение. Промените в robots.txt стигат до системите на OpenAI за около 24 часа.

При Google нещата стоят другояче. AI Overviews (обобщенията с AI най-горе в резултатите) и AI Mode ползват обикновения робот на Google, Googlebot. Ако страницата е в индекса на Google и може да се показва с откъс от текста (snippet), техническите условия са изпълнени. Според Google достъпът до AI функциите в търсенето се управлява пак през robots.txt за Googlebot. Отделното име Google-Extended е за обучението и за други системи на Google.

Как да пишете текст, който AI може да цитира

AI цитира откъси от страници, затова всеки раздел трябва да се чете самостоятелно и да отговаря на един въпрос.

Дайте отговора в първите едно-две изречения и чак след това обяснението. Ако въпросът е „колко струва доставката до Гърция“, отговорът е сума и срок. Три абзаца за любовта ви към клиента не са отговор. Пишете числа с източник и година, конкретни имена на продукти, размери и срокове. Точно този материал моделът няма откъде другаде да вземе.

Подписвайте се. Страница с реален автор, който има опит по темата, и с дата на последната редакция се цитира по-лесно от анонимен текст. Google го казва направо в насоките си за полезно съдържание, където пита „Кой“, „Как“ и „Защо“. Няма причина да мислим, че другите системи ценят обратното.

Ако не знаете откъде да започнете, в разделите „SEO и съдържание“ и „AI агенти“ описваме как подреждаме и автоматизираме такова съдържание.

Какво дават структурираните данни и какво не

Структурираните данни (schema.org, най-добре във формат JSON-LD, както препоръчва Google) казват на машините изрично, че това е продукт, това е цената, това е авторът, а това е въпрос с отговор. За онлайн магазин те са задължителен минимум: Product, Offer, Organization, BreadcrumbList и Article за блога.

Google обаче пише, че за AI Overviews и AI Mode не е нужна специална маркировка по schema.org. Структурираните данни няма да ви вкарат в AI отговора. Те помагат на машината да разбере правилно това, което вече е на страницата.

Google повтаря на няколко места и едно правило: маркировката трябва да съвпада с видимия текст. Ако в JSON-LD продуктът е на една цена, а на екрана на друга, сте си създали проблем.

llms.txt: какво е и защо да не очаквате много от него

llms.txt е предложение на Джереми Хауърд от септември 2024 г. Това е Markdown файл в корена на сайта (/llms.txt) с кратко описание и подредени връзки към най-важните страници, за да може езиков модел бързо да разбере какво има на сайта.

Идеята е разумна и файлът се прави за десет минути. Проблемът е в очакванията. Google изрично пише, че за да се появите в AI Overviews или AI Mode, не ви трябват нови машинно четими файлове или „AI текстови файлове“. Значи Google не го ползва за тези функции. OpenAI също не го споменава като условие за търсенето в документацията за роботите си.

Съветът ни е следният. Ако имате документация, каталог или много съдържание, сложете llms.txt. Той не вреди и може да помогне на AI агентите, които го четат. Ако обаче някой ви продава „GEO пакет“, в който основното е llms.txt, плащате за файл, за който Google е казал, че не му трябва.

По какво AI решава на кого да вярва

AI системите се опитват да цитират източници, на които може да се вярва. Отвън не знаем точните им правила, но знаем какво изгражда доверие при търсачките от години. Други сайтове ви споменават по смислен повод, имате истински адрес и контакти, авторите ви съществуват и данните ви могат да се проверят.

Има и обратна страна. AI системите повтарят и грешното, ако то е навсякъде. Ако в каталози, стари статии и профили в социалните мрежи стои стар адрес, грешно работно време или спрян продукт, моделът може уверено да го цитира. Затова изчистването на старата информация за вас в мрежата също е част от GEO, макар никой да не го продава под това име.

За малкия бизнес най-реалистичният път е да бъде първоизточник за нещо: собствени данни, снимки, сравнения, реален опит. Ако пишете същото като всички останали, AI няма причина да избере точно вас и ще вземе по-известния сайт.

Стъпки за GEO оптимизация, които се правят за един следобед

1. Проверете robots.txt: разрешени ли са Googlebot и OAI-SearchBot. Решете отделно дали разрешавате GPTBot да ползва текстовете ви за обучение.
2. Проверете в Search Console дали важните страници са индексирани и нямат nosnippet.
3. Изберете десетте най-важни въпроса на клиентите си и проверете дали за всеки имате страница с ясен отговор в първите две изречения.
4. Добавете към всяка такава страница автор, дата на редакция и поне един конкретен факт с източник.
5. Сложете или проверете JSON-LD: Organization, Product с Offer, Article, BreadcrumbList. Сверете цените с видимия текст.
6. Ако искате, добавете llms.txt, но като допълнение, без да градите стратегия около него.
7. Веднъж месечно задавайте същите десет въпроса на ChatGPT и на Google AI Mode и записвайте кой е цитиран. По-евтин и по-честен показател от този няма да намерите.