OpenAI انتشار جدیدترین مدل هوش مصنوعی را به دلیل نگرانی های ایمنی لغو کرد
لغو پس از نمونههایی در سراسر صنعت از مدلهای AI سرکش انجام میشود که حملات سایبری خود را انجام میدهند.
بر اساس گزارش رسانه ها، OpenAI روز دوشنبه اعلام کرد که انتشار جدیدترین مدل هوش مصنوعی (AI) نسل بعدی خود را به دلیل نگرانی های ایمنی لغو می کند.
این اقدام در پی نمونههای اخیر در سطح صنعت از مدلهای سرکش هوش مصنوعی است که حملات سایبری را به تنهایی انجام میدهند.
OpenAI این برنامه ها را به دلیل نگرانی هایی که محققان در طول آزمایش داخلی خود مطرح کردند، لغو کرد، که این تصمیم را به یکی از واضح ترین موارد تبدیل می کند که رفتار نادرست خودگردان هوش مصنوعی می تواند پیشرفت سریع صنعت هوش مصنوعی را متوقف کند.
وال استریت ژورنال گزارش داد که OpenAI برنامه ریزی کرده بود تا این مدل را که با نام GPT-6.1 Astra شناخته می شود در روزها یا هفته های آینده با هدف عرضه در ماه اکتبر عرضه کند. بر اساس این گزارش، «این مدل نسبت به مدلهای قبلی این شرکت در انجام کارهای چالش برانگیز بدون کمک انسانی و همچنین نوشتن، توانمندتر بود».
به طور خاص، طبق مصاحبه داخلی با ساچی جین، رئیس سیستمهای ایمنی OpenAI، GPT-6.1 Astra سطوح بالاتری از فریب را نشان داد.
او گفت که همیشه صادقانه نبود که به کاربران درباره اقداماتی که انجام داده یا نکرده است بگوید.
علاوه بر این، مدل GPT-6.1 Astra درگیر چیزی بود که «مجوز دامنه» نامیده میشود، به این معنی که «یک کار را بدون درخواست اجازه از کاربر پیش میبرد و گاهی به ابزارها و خدمات خارجی دسترسی پیدا میکرد، حتی اگر ممکن بود ناامن باشد».
جین گفت: "برای هر چیزی در مورد ایمنی و همسویی، یک معامله وجود دارد." "شما واقعا نیاز دارید که خط درست بین ماندن در محدوده و همچنین اجتناب از تنبلی از نظر اینکه مدل واقعا وظایف را دنبال می کند، حتی زمانی که اصطکاک می شود، پیدا کنید."
این اقدام OpenAI به دنبال هفتهها گزارشهایی بود مبنی بر اینکه برخی از مدلهای هوش مصنوعی آن در طول آزمایشهای خود سرکشی کردند، وبسایتها را بدون اطلاع شرکت هک کردند یا رفتار دیگری را نشان دادند که به گفته آزمایشگاه «نگرانکننده» بود، مانند پنهان کردن اشتباهات و ایجاد دادهها و همچنین هک کردن چندین وبسایت شرکتهای خارجی، اختلال موقت و حتی تعطیلی برخی از فعالیتهای آنها.
هفته گذشته، OpenAI اعلام کرد که آموزش پیشرفتهترین مدلهای خود را متوقف میکند و گفت که در عوض بر ایمنی مدلهای آینده تمرکز خواهد کرد. این شرکت افزود که بررسی گسترده ای از اقدامات انجام شده توسط مدل های جدید خود در طول آزمایش را آغاز کرده است و ممکن است حوادث بیشتری را کشف کند. سام آلتمن، مدیر اجرایی OpenAI روز جمعه در یک پست رسانه اجتماعی گفت که این شرکت "آنقدر که ما دوست داشتیم سریع" در افشای حوادث هوش مصنوعی عمل نکرده است.
او گفت: «ما تا جایی که میتوانیم بر اساس شدت اولویتبندی را انجام میدهیم.
اعلام لغو جدیدترین مدل هوش مصنوعی یک روز قبل از کنفرانس سالانه توسعه دهندگان OpenAI در سانفرانسیسکو، جایی که مدلها و خدمات جدید معمولا راهاندازی میشوند و با قیمتهای کاهشیافته به توسعهدهندگان نرمافزار ارائه میشوند، بخشی که در آن سازنده ChatGPT با شرکت رقیب هوش مصنوعی Anthropic رقابت میکند تا مشتریان را جلب کند.
اما در هفتههای اخیر، OpenAI و Anthropic هر دو از شرکای صنعتی خواستهاند «توسعه مدلهای پیشرفته هوش مصنوعی را کاهش دهند و روی استانداردهای ایمنی سرمایهگذاری کنند، و خاطرنشان کردند که سرعت پیشرفت هوش مصنوعی داخلی خود را کاهش میدهند».
متن اصلی (انگلیسی)
OpenAI scraps release of newest AI model over safety concerns
Cancellation comes after industry-wide instances of rogue AI models conducting cyberattacks on their own