OpenAI поддержит единый сигнал robots.txt для обучения ИИ

OpenAI присоединилась к инициативе по созданию общего сигнала в robots.txt, который позволит операторам сайтов выражать свои предпочтения относительно использования их контента для обучения ИИ. Компания обязуется уважать этот сигнал, если он будет применяться участвующими провайдерами.

Новый механизм призван упростить коммуникацию между владельцами сайтов и разработчиками ИИ-моделей. Вместо того чтобы полагаться на разрозненные инструкции, сайты смогут использовать единый стандарт, который будет понятен всем участникам инициативы.

OpenAI не раскрывает технических деталей реализации, но подчёркивает, что будет следовать сигналу в рамках своих процессов. Это ещё один шаг в сторону большей прозрачности и учёта мнения создателей контента при обучении моделей.