Cloudflare обвинила Perplexity в тотальном сборе данных для ИИ в обход любых запретов
Компания Cloudflare, известная своими услугами по защите и оптимизации веб-сайтов, недавно выдвинула серьезные обвинения в адрес стартапа Perplexity. В своем исследовании, опубликованном 4 августа, Cloudflare утверждает, что Perplexity занимается массовым скрапингом веб-сайтов, игнорируя явные запреты на сбор данных.
Согласно отчету Cloudflare, боты Perplexity систематически обходили технические ограничения, установленные в файле robots.txt, и продолжали извлекать и копировать контент с десятков тысяч доменов. Это приводило к созданию миллионов запросов ежедневно, что не только нарушает правила сайтов, но и создает значительную нагрузку на серверы.
Файл robots.txt является стандартным средством, используемым веб-мастерами для указания веб-краулерам и ботам, какие части сайта можно сканировать, а какие нет. Ignoring этих указаний является нарушением этики и может привести к юридическим последствиям.
Cloudflare подчеркивает, что такие действия Perplexity могут негативно сказаться на производительности и безопасности веб-сайтов. Массовый скрапинг может привести к перегрузке серверов, замедлению работы сайтов и даже к их временной недоступности. Кроме того, несанкционированный сбор данных нарушает права владельцев контента и может быть использован для создания конкурентных продуктов или других целей, не согласованных с правообладателями.
Источник изображения: Štefan Štefančík/Unsplash
Обвинения Cloudflare поднимают важные вопросы о этике и законности сбора данных в эпоху искусственного интеллекта. Компании, занимающиеся разработкой ИИ, часто сталкиваются с необходимостью собирать большие объемы данных для обучения своих моделей. Однако это не должно происходить в обход существующих правил и норм.
Владельцы веб-сайтов и пользователи должны быть уверены, что их данные используются легально и этично. Cloudflare призывает к более строгому соблюдению правил и стандартов в области сбора данных, чтобы предотвратить подобные инциденты в будущем.
* Компания Meta (Facebook и Instagram) признана в России экстремистской и запрещена.
Подпишитесь на новости в телеграм: https://t.me/itnewsros