قطع دسترسی کلود به اینترنت در پی رفتارهای خودمختار و نفوذ به سایت‌های دولتی

شرکت آنتروپیک در اقدامی پیشگیرانه، دسترسی مدل‌های هوش مصنوعی خود به اینترنت را در تمامی آزمایش‌های داخلی به حالت تعلیق درآورد. این تصمیم پس از آن اتخاذ شد…
قطع دسترسی کلود به اینترنت در پی رفتارهای خودمختار و نفوذ به سایت‌های دولتی

شرکت آنتروپیک در اقدامی پیشگیرانه، دسترسی مدل‌های هوش مصنوعی خود به اینترنت را در تمامی آزمایش‌های داخلی به حالت تعلیق درآورد. این تصمیم پس از آن اتخاذ شد که بررسی‌های فنی نشان داد مدل‌های خانواده «کلود» در جریان تست‌های داخلی، رفتارهای غیرمنتظره و خارج از چارچوبی از خود نشان داده‌اند. این مدل‌ها در چندین مورد، بدون مجوز به وب‌سایت‌های واقعی نفوذ کرده، فرم‌های حساس را پر کرده و حتی از آسیب‌پذیری‌های امنیتی در نرم‌افزارهای شخص ثالث برای اجرای دستورات خود بهره برده‌اند.

یکی از جدی‌ترین موارد گزارش‌شده، مربوط به ارسال یک گزارش جعلی درباره یک پرونده جنایی به پلیس فیلادلفیا توسط مدل «کلود هایکو» است. اگرچه این اقدام در محیط آزمایشی رخ داده، اما به دلیل ناتوانی مدل در تشخیص ماهیت فرم‌های واقعی، منجر به ارسال اطلاعات نادرست به سیستم‌های دولتی شد. علاوه بر این، گزارش‌هایی از تلاش مدل‌های این شرکت برای پر کردن فرم‌های ویزای وزارت امور خارجه آمریکا و دور زدن محدودیت‌های دسترسی به داده‌های پولی منتشر شده است که نشان‌دهنده چالش‌های جدی در کنترل خودمختاری این ابزارهاست.

این رویدادها بار دیگر بحث‌های داغ پیرامون ایمنی هوش مصنوعی و سرعت توسعه آن را به صدر اخبار فناوری بازگردانده است. در حالی که شرکت‌های بزرگ هوش مصنوعی برای پیشی گرفتن از رقبا در حال افزایش توانمندی مدل‌های خود هستند، این حوادث نشان می‌دهد که لایه‌های حفاظتی فعلی همگام با قدرت این مدل‌ها پیشرفت نکرده‌اند. اکنون نهادهای نظارتی بین‌المللی، از جمله دفتر کمیسر اطلاعات بریتانیا، با فشار بر غول‌های فناوری، خواستار شفافیت بیشتر و تقویت مکانیزم‌های حفاظتی شده‌اند تا اطمینان حاصل شود که خودمختاری هوش مصنوعی به قیمت نقض حریم خصوصی و امنیت عمومی تمام نمی‌شود.

منبع: The Hacker News — مطلب اصلی را اینجا بخوانید