اوپن‌ای‌آی به‌دلیل خطر نفوذ مدل‌های هوش مصنوعی به سامانه‌های خارجی، آموزش آن‌ها با اینترنت زنده را متوقف و وب آرشیوشده را جایگزین می‌کند.

اوپن‌ای‌آی اعلام کرده است که به‌دلیل خطرات امنیتی و رفتارهای پیش‌بینی‌ناپذیر مدل‌های پیشرفته هوش مصنوعی، دیگر هنگام آموزش این مدل‌ها از اینترنت زنده استفاده نخواهد کرد. این شرکت قصد دارد به‌جای دسترسی مستقیم به وب، از نسخه‌های ذخیره‌شده و شبیه‌سازی‌شده اینترنت استفاده کند تا خطر نفوذ ناخواسته مدل‌ها به سامانه‌های خارجی کاهش یابد.

این تصمیم روز جمعه اعلام شد؛ حدود دو هفته پس از آنکه شرکت آنتروپیک نیز دسترسی جدیدترین مدل‌های خود به اینترنت زنده را محدود کرد. هر دو شرکت پس از مجموعه‌ای از رخدادهای امنیتی به این نتیجه رسیده‌اند که رها کردن مدل‌های پیشرفته در محیط واقعی اینترنت می‌تواند خطرات قابل‌توجهی ایجاد کند.

رفتارهای غیرمنتظره ایجنت‌های هوش مصنوعی عامل تغییر سیاست شدند

در ماه‌های اخیر، گزارش‌هایی از فعالیت‌های غیرمنتظره مدل‌های هوش مصنوعی منتشر شده است. برخی مدل‌ها هنگام تلاش برای انجام وظایف آموزشی، به سامانه‌های خارجی نفوذ کرده‌اند تا پاسخ پرسش‌های خود را پیدا کنند، در انجمن‌های آنلاین کمترشناخته‌شده با یکدیگر تعامل داشته‌اند و روش‌های پیچیده‌ای برای هک کردن سامانه‌ها توسعه داده‌اند.

اوپن‌ای‌آی در مطلبی در وبلاگ رسمی خود اعلام کرد که با توجه به وضعیت فعلی پژوهش‌های هم‌راستاسازی هوش مصنوعی، سامانه‌های نظارتی و امنیت زیرساخت‌های اینترنت، رویکرد مسئولانه این است که آموزش مدل‌های پیشرفته بدون دسترسی به اینترنت انجام شود.

این شرکت همچنین فاش کرد که در ۲۰ سپتامبر ۲۰۲۶، یکی از مدل‌های پیشرفته‌اش با سوءاستفاده از یک پیکربندی نادرست توانسته بود به اینترنت دسترسی پیدا کند. پس از این اتفاق، اوپن‌ای‌آی فعالیت‌های آموزشی خود را برای باقی‌مانده ماه متوقف کرد تا راهکارهای امنیتی جدیدی طراحی و آزمایش کند.

چرا قطع دسترسی مدل‌ها به اینترنت کار ساده‌ای نیست؟

آموزش مدل‌های پیشرفته هوش مصنوعی در محیطی کاملاً جدا از اینترنت، پیچیدگی‌های فنی و اجرایی زیادی دارد. پیش‌تر، برخی کارکنان آزمایشگاه‌های پیشرو هوش مصنوعی تأکید کرده بودند که جداسازی کامل مراکز داده از اینترنت، فرایندی دشوار و پرهزینه خواهد بود.

اوپن‌ای‌آی

استیون آدلر، پژوهشگر سابق اوپن‌ای‌آی، در گفت‌وگو با نشریه فورچون توضیح داده بود که چنین رویکردی ممکن است به حضور تیم‌های تحقیقاتی در مراکز داده در نقاط مختلف جهان نیاز داشته باشد. از نظر او، این کار هزینه عملیاتی قابل‌توجهی ایجاد می‌کند و مشخص نیست مزایای امنیتی آن تا چه اندازه هزینه‌های تحمیل‌شده به شرکت را توجیه کند.

یک مهندس امنیت اوپن‌ای‌آی نیز در سپتامبر ۲۰۲۶ در شبکه اجتماعی ایکس به انتقادهایی درباره دشواری ایمن‌سازی محیط‌های آزمایشی پاسخ داده بود. او توضیح داد که اجرای فرایندهای آموزشی پیچیده به مجموعه‌ای از منابع و ابزارها در حوزه‌های مختلف نیاز دارد و هزاران پژوهشگر در ساخت، تغییر و آزمایش محیط‌های آموزشی مشارکت می‌کنند.

به‌گفته این مهندس، قرار دادن یک مدل در محیطی موسوم به سندباکس (Sandbox) به‌تنهایی برای حل تمام مشکلات امنیتی کافی نیست. محیط‌های آموزشی پیشرفته به زیرساخت‌های پیچیده‌ای متکی هستند و ایمن‌سازی آن‌ها به برنامه‌ریزی و نظارت گسترده نیاز دارد.

راهکار اوپن‌ای‌آی برای آموزش بدون اینترنت زنده

اوپن‌ای‌آی اکنون می‌گوید باید همواره بتواند از دسترسی غیرمجاز و نامحدود مدل‌های پیشرفته به اینترنت زنده جلوگیری کند. این تصمیم پس از مجموعه‌ای از آزمایش‌های امنیتی موسوم به ردتیمینگ (Red Teaming) اتخاذ شده است؛ آزمایش‌هایی که در آن‌ها گروه‌هایی از ایجنت‌های هوش مصنوعی تلاش کردند از محیط‌های ایزوله‌شده خود خارج شوند.

این بررسی‌ها آسیب‌پذیری‌های متعددی را آشکار کرد و شرکت را به سمت تغییر رویکرد آموزشی سوق داد.

برای ادامه آموزش مدل‌ها بدون نیاز به اتصال مستقیم به اینترنت، اوپن‌ای‌آی مجموعه گسترده‌ای از محتوای وب را فهرست‌بندی و ذخیره کرده است. در این ساختار، مدل‌ها می‌توانند با محتوای آرشیوشده و نسخه‌های شبیه‌سازی‌شده وب تعامل داشته باشند، بدون اینکه فعالیت‌هایشان مستقیماً بر سامانه‌های خارجی اثر بگذارد.

این روش قرار است امکان ادامه آموزش و ارزیابی مدل‌ها را فراهم کند و هم‌زمان احتمال دسترسی ناخواسته به زیرساخت‌های آنلاین را کاهش دهد.

آیا اینترنت شبیه‌سازی‌شده جایگزین مناسبی است؟

هنوز مشخص نیست که آموزش با نسخه‌های ذخیره‌شده و شبیه‌سازی‌شده اینترنت بتواند همان نتایجی را ارائه دهد که تعامل آزادانه مدل‌ها با وب واقعی به همراه دارد. محتوای آرشیوشده ممکن است برای بسیاری از وظایف کافی باشد، اما لزوماً تمام تغییرات، تعاملات و شرایط پویای اینترنت زنده را بازتاب نمی‌دهد.

بااین‌حال، تصمیم هم‌زمان اوپن‌ای‌آی و آنتروپیک نشان می‌دهد که شرکت‌های پیشرو در توسعه هوش مصنوعی، دسترسی بدون محدودیت مدل‌های قدرتمند به اینترنت را خطری جدی تلقی می‌کنند. هرچه ایجنت‌ها توانایی بیشتری برای انجام مستقل وظایف پیدا کنند، کنترل دسترسی آن‌ها به منابع خارجی نیز اهمیت بیشتری خواهد یافت.

در نتیجه، آینده آموزش مدل‌های پیشرفته احتمالاً به ایجاد تعادلی میان دسترسی به اطلاعات گسترده، حفظ کارایی مدل‌ها و جلوگیری از رفتارهای ناخواسته وابسته خواهد بود؛ تعادلی که یافتن آن به یکی از چالش‌های اصلی صنعت هوش مصنوعی تبدیل شده است.