Общее правило для сайтов

OpenAI объявила, что будет учитывать общий сигнал в файле robots.txt — через него владельцы сайтов смогут сообщать о предпочтениях относительно использования их материалов для обучения генеративных ИИ-моделей. Сигнал рассчитан на то, чтобы одно правило могли распознавать сразу несколько участвующих поставщиков.

Сейчас операторам сайтов приходится указывать отдельных поисковых роботов и поддерживать отдельные правила для разных поставщиков. OpenAI считает, что общий сигнал упростит эту работу.

Компания планирует внедрить поддержку в ближайшие месяцы и сообщить подробности позднее. Новый сигнал не заменит существующие настройки поисковых роботов OpenAI: компания заявляет, что продолжит их соблюдать.

Работа над сигналом продолжается в IETF

Инициатива опирается на работу рабочей группы по предпочтениям в сфере ИИ при Internet Engineering Task Force (IETF). Обсуждение словаря предпочтений продолжается; OpenAI сообщила, что участвует в этой работе вместе с другими сторонами. Компания призвала и других поставщиков ИИ учитывать общий сигнал.