کلودفلر، شرکت بزرگ زیرساخت اینترنتی، از ابزار جدیدی به نام «هزارتوی هوش مصنوعی» (AI Labyrinth) رونمایی کرده است. هدف این ابزار مقابله با ربات‌های خزنده وب است که بدون اجازه به جمع‌آوری داده‌ها از وب‌سایت‌ها برای آموزش مدل‌های هوش مصنوعی می‌پردازند.
به جای مسدود کردن این ربات‌ها، کلودفلر آن‌ها را به یک دام از محتوای بی‌ارزش تولید شده توسط هوش مصنوعی می‌کشاند. این شرکت توضیح داده است که وقتی رفتار مشکوک ربات‌ها شناسایی شود، آن‌ها به مجموعه‌ای از صفحات تقلبی هدایت می‌شوند. این صفحات که با استفاده از هوش مصنوعی تولید شده‌اند، منابع ربات‌ها را تلف کرده و آن‌ها را سردرگم می‌کنند.
وب‌سایت‌ها مدت‌هاست از فایل «robots.txt» برای مدیریت دسترسی ربات‌های وب استفاده می‌کنند. اما برخی شرکت‌های هوش مصنوعی متهم شده‌اند که این قوانین را نادیده می‌گیرند. کلودفلر روزانه بیش از ۵۰ میلیارد درخواست از ربات‌های وب دریافت می‌کند و اگرچه ابزارهایی برای شناسایی و مسدودسازی ربات‌های مخرب دارد، اما مهاجمان به سرعت روش‌های خود را تغییر می‌دهند.
«هزارتوی هوش مصنوعی» به جای مسدود کردن ربات‌ها، آن‌ها را وادار می‌کند تا داده‌هایی را پردازش کنند که هیچ ارتباطی با محتوای اصلی وب‌سایت ندارند. این ابزار به عنوان یک تله پیشرفته عمل می‌کند و ربات‌های هوش مصنوعی را به صفحات جعلی بیشتری هدایت می‌کند، در حالی که کاربران واقعی هرگز این لینک‌ها را نمی‌بینند.
کلودفلر اعلام کرده است که این ابزار به آن‌ها کمک می‌کند تا الگوها و مشخصات جدید ربات‌ها را شناسایی کرده و فهرست ربات‌های مخرب خود را به‌روز نگه دارند. محتوای تولید شده در صفحات جعلی شامل اطلاعات علمی واقعی است، اما هیچ ارتباطی با محتوای وب‌سایت مورد نظر ندارد. این کار برای جلوگیری از انتشار اطلاعات نادرست در اینترنت انجام می‌شود.
مدیران وب‌سایت‌ها می‌توانند این قابلیت را از طریق بخش مدیریت ربات‌ها در داشبورد کلودفلر فعال کنند. کلودفلر تاکید کرده است که این تنها نسخه اولیه این فناوری است و قصد دارد در آینده شبکه‌ای از آدرس‌های اینترنتی مرتبط ایجاد کند تا ربات‌ها را برای مدت طولانی در یک چرخه بی‌پایان از صفحات بی‌ارزش نگه دارد.
«هزارتوی هوش مصنوعی» یک روش نوآورانه برای مقابله با ربات‌های وبی است که بدون اجازه داده‌ها را از وب‌سایت‌ها جمع‌آوری می‌کنند. این ابزار نه تنها ربات‌های مخرب را گمراه می‌کند، بلکه به کلودفلر کمک می‌کند تا ربات‌های جدید و روش‌های نفوذ آن‌ها را شناسایی کند. با توجه به پیشرفت روزافزون هوش مصنوعی، این ابزار می‌تواند به یک راهکار دفاعی موثر برای حفاظت از محتوای وب تبدیل شود.
Cloudflare, a major internet infrastructure company, has unveiled a new tool called AI Labyrinth. This tool aims to combat web crawlers that extract data from websites without permission to train artificial intelligence models.
Instead of blocking these bots, Cloudflare lures them into a trap of worthless AI-generated content. The company explained that when suspicious bot behavior is detected, this free and optional tool redirects them to a collection of fake pages. These pages, generated using artificial intelligence, waste the bots’ resources and confuse them.
Websites have long used the “robots.txt” file to manage the access of web bots. However, some AI companies have been accused of ignoring these rules. Cloudflare receives over 50 billion requests from web bots daily, and although it has tools to identify and block malicious bots, attackers quickly change their methods.
AI Labyrinth, instead of blocking bots, forces them to process data that is irrelevant to the website’s main content. This tool acts as an advanced trap, leading AI bots to more fake pages, while legitimate users never see these links.
Cloudflare has stated that this tool helps them identify new bot patterns and signatures, allowing them to keep their list of malicious actors up to date. The content generated on the fake pages includes factual scientific information but has no connection to the specific content of the targeted website. This is done to prevent the spread of misinformation online.
Website administrators can enable this feature through the Bot Management section of their Cloudflare dashboard. Cloudflare emphasized that this is just the initial version of the technology and plans to create a network of interconnected URLs in the future to keep bots in an endless loop of worthless pages for extended periods.
AI Labyrinth is an innovative approach to dealing with web bots that collect data from websites without authorization. This tool not only misleads malicious bots but also helps Cloudflare identify new bots and their methods of intrusion. Given the increasing development of artificial intelligence, this tool could become one of the most effective defense strategies for protecting web content.