Cloudflare представила политику Content Signals Policy для управления доступом к контенту сайтов
habr.comCloudflare представила новое дополнение к своему сервису robots.txt — политику Content Signals Policy. Эта бесплатная функция помогает владельцам сайтов лучше контролировать, как компании, работающие с искусственным интеллектом, получают доступ к их контенту и используют его.Стандартный файл robots.txt уже позволяет сайтам указывать, какие поисковые роботы могут собирать данные и какие разделы сайта должны оставаться закрытыми.
Новая политика Cloudflare вводит дополнительный уровень управления: теперь можно задать, как именно разрешается использовать полученный контент — только для поиска, для поиска и обучения ИИ или вообще никак. «Интернет не может ждать, пока оригинальный контент используется другими компаниями для получения прибыли.
