به گزارش کارگروه فناوری اطلاعات سایبربان، یکی از کارکنان سابق بخش ایمنی اوپن‌اِی‌آی (OpenAI) که به‌تازگی استعفا داده است، از رویکرد این شرکت نسبت به ایمنی هوش مصنوعی انتقاد و اعلام کرد که فرهنگ حاکم بر آن که بر توسعه سریع متمرکز است، خطر بروز شکست‌ها را افزایش می‌دهد.
دیوید رابینسون در مطلبی با عنوان من اوپن‌اِی‌آی را ترک کردم؛ چون فرهنگ آن دچار مشکل است که روز شنبه در نشریه آتلانتیک منتشر شد، اظهار داشت که شرکت‌های فعال در حوزه هوش مصنوعی، از جمله اوپن‌اِی‌آی، به‌اندازه کافی محتاط عمل نمی‌کنند و باید پیش از توسعه سیستم‌های توانمندتر، تأکید بیشتری بر تخصص و پژوهش در زمینه ایمنی داشته باشند.
رابینسون نوشت:
زمان آزمون‌وخطا تمام شده است و سیستم‌های پیشرفته هوش مصنوعی به پادمان‌هایی شبیه به پادمان‌های مورداستفاده در صنایعی مانند انرژی هسته‌ای و هوانوردی نیاز دارند. اوپن‌اِی‌آی به‌شدت به چیزی که آن را استقرار تکراری می‌نامد، متکی است که در آن سیستم‌ها آزاد می‌شوند و پادمان‌ها در هنگام بروز مشکلات تقویت می‌شوند.
این اظهارات به بحثی در صنعت هوش مصنوعی در مورد اینکه آیا شرکت‌ها برای توسعه سیستم‌های قدرتمندتر خیلی سریع حرکت می‌کنند، می‌افزاید. اوپن‌اِی‌آی و آنتروپیک پس از حوادثی که در آن‌ها کنترل‌های ایمنی از کارافتاده‌اند یا سیستم‌های آزمایشی به طور غیرمنتظره‌ای رفتار کرده‌اند، با بررسی دقیق مواجه شده‌اند.
رابینسون گفت ۳.۵ سالی را که در اوپن‌اِی‌آی گذرانده، به تدوین چارچوب آمادگی شرکت کمک کرده و بر گزارش‌های ایمنی ۱۲ پرتاب مدل مرزی نظارت داشته است.
او نوشت:
همان‌طور که شرکت از یک پرتاب به پرتاب بعدی می‌دود، در دستیابی به سطح مراقبتی که به اعتقاد من موردنیاز است، شکست می‌خورد.
سخنگوی اوپن‌اِی‌آی در بیانیه‌ای گفت:
ما اطمینان حاصل می‌کنیم که مدل‌ها از آنچه می‌توانیم با خیال راحت مدیریت و ایمن کنیم، توانمندتر نشوند و وقتی نیاز به کاهش سرعت داشته باشیم، آموزش را متوقف می‌کنیم یا مدل‌ها را به تعویق می‌اندازیم.
رابینسون همچنین هشدار داد که قابلیت‌های هوش مصنوعی سریع‌تر از درک محققان از هم‌ترازی پیشرفت می‌کنند، زمینه‌ای که بر اطمینان از عملکرد سیستم‌های هوش مصنوعی مطابق با اهداف و ارزش‌های انسانی متمرکز است.
