Компания Cloudflare объявила о планах по созданию торговой площадки, на которой владельцы сайтов смогут продавать доступ к своему контенту для обучения ИИ-моделей. Этот шаг является частью более широкой инициативы по предоставлению издателям большего контроля над тем, как ИИ-боты взаимодействуют с их сайтами.

Мэтью Принс, генеральный директор Cloudflare, объяснил причину такого решения: "Мы считаем, что сайты любого размера должны получать справедливую компенсацию за использование их контента". Рынок, который будет запущен в течение следующего года, позволит создателям контента устанавливать цены для компаний ИИ на доступ к их сайтам.

Это объявление было сделано одновременно с выпуском AI Audit, бесплатного инструмента для всех клиентов Cloudflare. AI Audit предоставляет владельцам сайтов подробную аналитику по активности ИИ-ботов, включая информацию о том, какие компании собирают их контент, как часто, и какие разделы сайтов наиболее популярны среди ИИ-роботов.

Новый инструмент классифицирует ИИ-ботов на три типа: AI Data Scrapers, AI Search Crawlers и Archivers. Это различие очень важно, поскольку каждый тип может по-разному влиять на сайт. Например, AI Search Crawlers могут приводить трафик на сайт, в то время как AI Data Scrapers в основном собирают информацию для обучения моделей без обязательного указания источника.

Cloudflare также представила возможность одним щелчком мыши блокировать все три типа ИИ-ботов, что дает владельцам сайтов "паузу" для оценки своей стратегии в отношении использования ИИ-контента. Для более детального контроля администраторы теперь могут создавать пользовательские правила для разрешения или блокировки определенных типов ботов.



Cloudflare позволяет владельцам сайтов блокировать определенных ИИ-ботов и разрешать других, что дает им возможность детально контролировать использование своего контента.