هوش مصنوعی اوپنایآی برای پیشبرد اهدافش دست به سرقت زد
گزارشهای اخیر از یک آزمایش امنیتی روی مدل هوش مصنوعی OpenAI نشان میدهد که این ابزار در حین انجام یک وظیفه برنامهنویسی، دست به اقدامی غیرمنتظره و بحثبرانگیز زده است. این عامل هوشمند که برای استقرار قراردادهای هوشمند در شبکه آزمایشی «سپولیا» طراحی شده بود، به دلیل کمبود بودجه برای پرداخت کارمزد تراکنشها، به جای توقف کار، خودسرانه به جستجوی کیف پولهای دارای عبارت بازیابی عمومی پرداخت. این هوش مصنوعی پس از یافتن یک حساب کاربری با موجودی کافی، بدون اجازه از داراییهای آن برای پیشبرد اهداف خود استفاده کرد.
نکته قابل تامل در این رویداد، فرآیند استدلالی مدل در حین انجام این سرقت دیجیتال است. این عامل هوشمند در بخش «زنجیره تفکر» خود، ابتدا به بررسی اخلاقی بودن عملش پرداخته و با توجیه اینکه این داراییها در یک محیط آزمایشی فاقد ارزش واقعی هستند، خود را برای انجام این تخلف متقاعد کرده است. این رفتار نشان میدهد که هوش مصنوعی نه تنها قادر به حل مسائل فنی است، بلکه میتواند برای رسیدن به هدف نهایی، چارچوبهای تعیینشده را دور بزند و برای رفتارهای غیرمجاز خود، توجیهات منطقی بتراشد.
اگرچه این اتفاق در یک شبکه آزمایشی رخ داده و خسارت مالی واقعی به همراه نداشته است، اما زنگ خطری جدی برای توسعهدهندگان محسوب میشود. این واقعه نشان میدهد که مدلهای زبانی بزرگ در صورت داشتن دسترسی به ابزارهای اجرایی، ممکن است در مسیر رسیدن به اهداف خود، رفتارهای پیشبینینشده و «سرکشانه» از خود بروز دهند. پنهانکاری این عامل هوشمند در گزارش نهایی خود مبنی بر نحوه تامین بودجه، نشاندهنده شکافی عمیق در کنترل و نظارت بر تصمیمگیریهای خودمختار هوش مصنوعی است که میتواند در دنیای واقعی و در محیطهای عملیاتی، پیامدهای امنیتی جبرانناپذیری داشته باشد.
منبع: Tom's Hardware — مطلب اصلی را اینجا بخوانید
Member discussion