OpenAI uszanuje wspólny sygnał w robots.txt. Jedna zgoda lub odmowa dla wielu firm AI
OpenAI zapowiedział 30 października, że będzie respektować wspólny wpis w pliku robots.txt, którym właściciel strony powie od razu wielu firmom AI, czy jego treści mogą trafić do trenowania modeli. Nowy sygnał ma działać w ciągu najbliższych miesięcy.
OpenAI ogłosił 30 października, że będzie respektować wspólny sygnał w pliku robots.txt, którym właściciel strony określa, czy jego treści mogą posłużyć do trenowania modeli generatywnej AI. Zmiana dotyczy każdego, kto prowadzi stronę firmową, sklep, bloga albo serwis z artykułami. Jeden wpis ma przekazać tę samą decyzję wielu firmom AI naraz. Szczegóły OpenAI podał w komunikacie na swoim blogu.
Czym jest robots.txt i co się zmienia
Robots.txt to zwykły plik tekstowy w głównym katalogu strony. Roboty wyszukiwarek i firm AI czytają go, zanim zaczną pobierać podstrony, i sprawdzają, czego właściciel sobie nie życzy. Do tej pory trzeba było znać nazwę robota każdej firmy osobno i dla każdej pisać osobne reguły. OpenAI pisze wprost, że wspólny sygnał ma tę pracę zmniejszyć.
Sygnał powstaje w grupie roboczej AI Preferences w IETF, organizacji, która ustala standardy internetu. OpenAI dołączył do innych uczestników tej grupy we wspólnym ogłoszeniu. W komunikacie nie wymienia jednak, które firmy już zadeklarowały, że będą sygnał respektować. Na końcu zachęca innych dostawców AI, żeby też go przyjęli.
Udział jest dobrowolny. Komunikat nie opisuje, jak dokładnie będzie wyglądał wpis w pliku, i nie mówi, czy sygnał obejmie treści pobrane wcześniej. OpenAI chce go wdrożyć „w nadchodzących miesiącach” i zapowiada osobną informację ze szczegółami.
Co działa już dziś
Nowy sygnał nie zastąpi obecnych reguł. OpenAI zapewnia, że dotychczasowe ustawienia dla jego robotów dalej obowiązują. Firma używa kilku robotów, a każdy robi co innego. Według dokumentacji OpenAI wygląda to tak:
| Robot | Do czego służy | Co daje blokada w robots.txt |
|---|---|---|
| GPTBot | pobiera treści, które mogą trafić do trenowania modeli bazowych | sygnał, że treści nie powinny trafić do trenowania |
| OAI-SearchBot | pokazuje strony w wynikach wyszukiwarki ChatGPT | strona znika z odpowiedzi wyszukiwarki, ale może się pojawić jako link nawigacyjny |
| ChatGPT-User | otwiera stronę, gdy prosi o to użytkownik ChatGPT | reguły robots.txt mogą nie mieć zastosowania, bo akcję zlecił człowiek |
| OAI-AdsBot | sprawdza strony zgłoszone jako reklamy w ChatGPT | odwiedza tylko strony z reklam, a zebranych danych OpenAI nie używa do trenowania |
Ustawienia GPTBota i OAI-SearchBota są niezależne. Możesz więc zablokować trenowanie i dalej pojawiać się w wynikach wyszukiwania w ChatGPT. Po zmianie pliku wyszukiwarka ChatGPT potrzebuje około 24 godzin, żeby to uwzględnić.
Co sprawdzić na swojej stronie
- Otwórz w przeglądarce adres swojej strony z dopiskiem /robots.txt i zobacz, czy plik w ogóle istnieje.
- Poszukaj w nim nazw GPTBot i OAI-SearchBot. Brak wpisu oznacza, że robot nie ma zakazu.
- Jeśli nie chcesz, żeby treści trafiały do trenowania modeli OpenAI, dodaj zakaz dla GPTBota. Jeśli chcesz zostać w wyszukiwarce ChatGPT, nie blokuj OAI-SearchBota.
- Gdy stroną zajmuje się agencja albo firma hostingowa, poproś ją o zmianę i sprawdź plik po wdrożeniu.
To, czy twoje własne rozmowy z ChatGPT trenują modele, ustawiasz osobno, na koncie, a nie na stronie. Opisaliśmy to w tekście o bezpieczeństwie danych w ChatGPT i w poradniku, jak wyłączyć zapisywanie historii czatów.
OpenAI nie podał daty wdrożenia wspólnego sygnału. Do tego czasu o trenowaniu na treściach twojej strony decyduje wpis dla GPTBota.
- Od kiedy OpenAI będzie respektować wspólny sygnał w robots.txt?OpenAI podaje tylko, że chce go wdrożyć w ciągu najbliższych miesięcy. Dokładnej daty nie ma, firma zapowiada osobną informację przy wdrożeniu.
- Jak zablokować OpenAI trenowanie na mojej stronie?Już dziś możesz zablokować w pliku robots.txt robota GPTBot. Według dokumentacji OpenAI taki zakaz oznacza, że treści strony nie powinny trafić do trenowania modeli bazowych.
- Czy blokada GPTBota usunie moją stronę z wyszukiwarki ChatGPT?Nie. Za wyszukiwarkę odpowiada osobny robot, OAI-SearchBot, i ustawienia obu robotów są od siebie niezależne.
- OpenAI, komunikat „Making it easier for websites to express AI training preferences”, dostęp 2026-10-31
- OpenAI, dokumentacja „Overview of OpenAI Crawlers”
Ten tekst napisał model AI na podstawie źródeł wymienionych wyżej. Liczby, daty i nazwy automat porównał ze źródłem, ale przed publikacją nie czytał go człowiek. Jak powstają teksty.
Widzisz błąd? Napisz, poprawiamy i dopisujemy notę o zmianie.
Chcesz częściej widzieć nasze teksty w Google? Dodaj bezhalucynacji.pl do preferowanych źródeł.
Wdraża systemy oparte na AI w firmach produkcyjnych i usługowych. Z modelami językowymi pracuje codziennie i wie, w czym potrafią zmyślać. Dlatego każda liczba w tekstach ma tu źródło, a teksty, które sam przeczytał, są oznaczone jako sprawdzone.
wszystkie teksty autora