Boty AI w PrestaShop: które blokować, a które przynoszą sprzedaż

Sklep odzieżowy z ośmiuset modelami zaczyna padać każdego popołudnia. Serwer się nie zmienił, ruch też nie, a w logu pojawiają się nowe nazwy: Bytespider, GPTBot, ClaudeBot. Pierwszy odruch to zablokować wszystkie. To drogi odruch i nie naprawia tego, co naprawdę się psuje.

Jakie boty AI odwiedzają Twój sklep i co robi każdy z nich?

Nie są takie same i to jest część, której prawie nikt nie sprawdza. Firmy AI wysyłają trzy różne roboty o trzech różnych nazwach, właśnie po to, żebyś mógł zdecydować o każdym osobno:

• Trenowanie. Zbierają strony do przyszłych wersji modelu: GPTBot (OpenAI), ClaudeBot (Anthropic), Google-Extended (Google), Bytespider (ByteDance, firma od TikToka), CCBot. Zablokowanie ich nie kosztuje Cię żadnych wizyt.
• Wyszukiwanie. Indeksują Twój sklep, żeby można go było przytoczyć, gdy ktoś zapyta: OAI-SearchBot, Claude-SearchBot, PerplexityBot. Zablokuj je, a przestaniesz pojawiać się w odpowiedziach.
• Prośba człowieka. Pobierają Twoją stronę, bo ktoś właśnie zapytał o Ciebie: ChatGPT-User, Claude-User. Nie przeszukują sieci: obsługują potencjalnego klienta. OpenAI uprzedza też, że ponieważ to działania zainicjowane przez użytkownika, reguły robots.txt mogą ich nie dotyczyć.

Lista blokad krążąca po forach wrzuca wszystkie trzy grupy do jednego worka. Zamyka trenowanie — które może rzeczywiście chciałeś zamknąć — a przy okazji usuwa Cię z indeksu i zatrzaskuje drzwi przed klientem, który pytał o Twoje buty sportowe.

Zablokowanie wszystkich kosztuje Cię sprzedaż — i jest to zmierzone

Adobe śledzi ponad bilion wizyt w amerykańskich sklepach internetowych i od jedenastu miesięcy z rzędu mierzy to samo: odwiedzający, który przychodzi z AI, konwertuje o około 60 % lepiej niż ten, który przychodzi z dowolnego innego kanału. Zostawia o 37 % więcej przychodu na wizytę, o 28 % częściej dodaje do koszyka i spędza na stronie prawie półtora raza dłużej.

To ma sens: zanim ten klient kliknie, porównanie odbyło się już w czacie. Nie przegląda, tylko już zdecydował.

I nie jest to margines: ruch z AI do sklepów wzrósł o 62 % w rok i od końca 2024 roku zwiększył się dwunastokrotnie.

Zablokowanie robota trenującego oszczędza Ci transfer. Zablokowanie robota wyszukującego wymazuje Cię z odpowiedzi, która właśnie miała Cię przytoczyć.

Google-Extended: jedyny, którego możesz zamknąć za darmo

Jest jeden, który ma same plusy, a prawie nikt o nim nie wie. Google-Extended decyduje, czy Google może używać Twoich tekstów do trenowania Gemini, i jest to zgoda oddzielna od Googlebota, który indeksuje Twój sklep do zwykłego wyszukiwania.

Ważne jest to: podsumowania AI na górze wyników Google nie korzystają z Google-Extended, tylko ze zwykłego indeksu Googlebota. Możesz powiedzieć Google, żeby nie trenował na Twoich kartach produktów, i nadal pojawiać się dokładnie tak jak wcześniej w wyszukiwarce i w tych podsumowaniach.

Bytespider ignoruje Twój robots.txt

Tu rozpada się połowa rad, które przeczytasz. robots.txt to prośba, a nie drzwi. Działa z tymi, którzy zechcą go uszanować.

Najczęściej przytaczany przypadek to Bytespider, robot ByteDance — firmy od TikToka — który zasila ich asystenta Doubao. ByteDance twierdzi, że szanuje robots.txt; administratorzy opisują co innego: niektórzy odnotowali do 1,4 miliona zapytań dziennie od tego jednego bota, czyli rząd wielkości dwadzieścia pięć razy więcej niż GPTBot. W przypadku Bytespidera robots.txt nie wystarcza: trzeba go zamknąć na serwerze.

I nie jest sam. W 2025 roku Cloudflare publicznie oskarżył Perplexity o przeszukiwanie stron pod niezadeklarowanymi tożsamościami, gdy jego zadeklarowany agent był zablokowany: zmieniał user-agenta, udawał zwykłego Chrome na macOS i rotował adresy spoza opublikowanych zakresów. Cloudflare usunął go ze swojej listy zweryfikowanych botów. Perplexity zaprzeczył.

Praktyczny wniosek: robots.txt działa w przypadku OpenAI, Anthropic i Google, które go szanują i dokumentują swoich agentów. Na resztę potrzebujesz prawdziwej blokady — reguły na serwerze według user-agenta albo przełącznika blokady robotów AI, który oferuje Ci już Twój CDN, jeśli z niego korzystasz.

Rachunek, który wyjaśnia, dlaczego Twój sklep pada

Wróćmy do sklepu odzieżowego. Osiemset modeli to nie osiemset adresów. Przy włączonym wyszukiwaniu fasetowym — 6 rozmiarów, 12 kolorów, 20 marek, 4 przedziały cenowe — każda kategoria generuje 5760 kombinacji z jedną wartością na filtr. W czterdziestu kategoriach to 230 000 adresów URL. A to licząc jedną opcję na filtr: w chwili, gdy klient może zaznaczyć dwa rozmiary naraz, liczba idzie w miliony.

Żadna z tych stron tak naprawdę nie istnieje. Każda uruchamia ciężkie zapytanie, którego pamięć podręczna nie zatrzyma, bo każda kombinacja jest inna.

To nie AI wykopała tę dziurę. Była tam od lat, a Ty płaciłeś za nią zmarnowanym budżetem indeksowania Google, o czym pisaliśmy w tekście o wyszukiwaniu fasetowym i CPU. AI pomnożyła liczbę robotów, które po niej chodzą — boty to dziś ponad połowa całego ruchu w sieci — i właśnie tam pęka sklep ze skromnymi zasobami: nie od jednej drogiej wizyty, tylko od pięćdziesięciu naraz.

Dlatego blokowanie robotów leczy objaw. Te, które przyjdą w przyszłym miesiącu, będą miały inne nazwy.

Co robić i w jakiej kolejności?

1. Zamknij adresy, które nie powinny istnieć dla nikogo. Kombinacje filtrów, wyniki wyszukiwania wewnętrznego, sortowania, 47. strona listy, koszyk i konto klienta. Ani dla AI, ani dla Google. To właśnie obniża CPU.
2. Zostaw otwarte roboty wyszukiwania AI. OAI-SearchBot, Claude-SearchBot, PerplexityBot, ChatGPT-User i Claude-User to te, które przyprowadzają Ci klienta konwertującego o 60 % lepiej.
3. Zdecyduj o trenowaniu. GPTBot, ClaudeBot i CCBot są opcjonalne. Google-Extended możesz zamknąć za darmo.
4. Zablokuj Bytespidera na serwerze, a nie w robots.txt: i tak go nie przeczyta.
5. Czytaj logi przez tydzień przed zmianą i po niej. Tylko to powie Ci, czy dobrze trafiłeś.

A jeśli serwer nie ma już nic do dania

Wszystko powyżej zakłada, że masz zapas. Jeśli jesteś na hostingu współdzielonym, a sklep pada każdego popołudnia, najpierw gasisz pożar: zamykasz roboty trenujące i wpuszczasz tylko wyszukujące.

Ale niech to będzie decyzja z datą, a nie stan na zawsze. Sklep, który zamknął drzwi przed robotami wyszukiwania AI, nie pojawia się, gdy ludzie o niego pytają, a tego nie widać na żadnym wykresie: po prostu się nie dzieje.

Właśnie z takim podziałem przychodzi Ochrona przed botami dla PrestaShop: GPTBot, ClaudeBot, CCBot, Bytespider i reszta robotów trenujących są zablokowane na serwerze — tam, gdzie robots.txt nie sięga — a boty wyszukiwania AI i zweryfikowane Google wchodzą dalej, a listę edytuje się w panelu w dniu, w którym się zmienia. A jeśli wolisz, żebyśmy przyjrzeli się temu razem z Tobą, napisz, jak radzi sobie Twój serwer.

Jeśli nie wiesz, od czego zacząć cięcie, powiedz nam, jaki masz katalog, ile filtrów jest włączonych i na jakim serwerze to działa, a powiemy Ci, co zamknąć, co zostawić otwarte i co naprawić, zanim w ogóle dotkniesz robots.txt.