Проект Cloudflare запустил сервис Pay per Crawl, который создает рынок контента для авторов и ИИ-компаний.
Теперь у владельцев сайтов появилась возможность разрешать или запрещать сканерам искусственного интеллекта просматривать их ресурс, а также устанавливать фиксированный размер оплаты за каждый обход страницы.
При этом дополнительно сервис может открыть бесплатный анализ страниц или закрыть его полностью.
Инструмент также позволит увидеть, для чего краулеры просматривают сайт.
Как известно, Cloudflare предоставляет сервисы по защите, ускорению и стабильной работе сайтов и приложений. На поставщика облачной инфраструктуры в интернете приходится 20% трафика.