Cloudflare, публічний постачальник хмарних послуг, представив новий безкоштовний інструмент для захисту даних вебсайтів від використання в навчанні штучного інтелекту, повідомляє TechCrunch.
Деякі розробники ШІ, такі як Google, OpenAI та Apple, дозволяють власникам вебсайтів обмежувати доступ їхнім ботам для збору даних та навчання моделей через файл robots.txt. Однак, як зауважує Cloudflare, не всі ШІ дотримуються цих правил.
Компанія проаналізувала трафік від ботів ШІ та пошукових роботів. Інструмент визначає, чи намагається бот ШІ уникнути виявлення, імітуючи поведінку людини у веббраузері.
“Коли зловмисники масштабно сканують вебсайти, вони зазвичай використовують інструменти та фреймворки, які ми можемо розпізнати,” – зазначають у Cloudflare. “Наші моделі можуть належним чином позначати трафік від ботів ШІ, що ухиляються від виявлення.”
Компанія також запровадила форму для повідомлень про таких ботів.
Проблема з ботами ШІ загострилася через зростання попиту на навчальні дані для моделей генеративного ШІ. Багато вебсайтів, побоюючись, що їхній контент використовують без дозволу або компенсації, блокують боти ШІ. За одним дослідженням, близько 26% з 1 000 найбільших сайтів в інтернеті заблокували бота OpenAI.
Інструменти, подібні до Cloudflare, можуть допомогти, але лише за умови достатньої точності.