📡 OpenAI змінила правила роботи свого вебсканера OAI-SearchBot

OpenAI оновила опис своїх ботів, які відвідують сайти, щоб ChatGPT міг отримувати відкриті дані з вебу.

Компанія зазначила, що OAI-SearchBot більше не використовується для формування посилань у відповідях ChatGPT.

📎 Окремо в компанії пояснили, що тепер ChatGPT User Agent — бот, який переходить на сайт за прямим запитом людини — може відвідувати сторінки навіть тоді, коли robots.txt забороняє іншим сканерам доступ.

Медіа Inweb | Підписатись