براساس گزارش ها ، Sakana AI Startup از ادعای 100 بار در سرعت مدلهای آموزشی هوش مصنوعی که اخیراً ارائه کرده بود ، بازنشسته شده است.
به گزارش TechCrunch ، این هفته ، استارت آپ Sakana AI که توسط Nvidia حمایت مالی شده و صدها میلیون دلار در شرکت های سرمایه جذب کرده است ، ادعای قابل توجهی را مطرح کرده است.
این شرکت اعلام کرده است که یک سیستم اطلاعاتی مصنوعی به نام AI CUDA ایجاد کرده است که می تواند سرعت آموزش برخی از مدل های هوش مصنوعی را تا 100 بار افزایش دهد. در حقیقت ، مشکل اصلی این بود که این سیستم واقعاً کار نمی کند.
کاربران در شبکه اجتماعی X (توییتر سابق) به زودی فهمیدند که سیستم جدید Sakana نه تنها عملکرد را بهبود می بخشد بلکه عملکرد آموزش مدل را سه برابر کرده است!
به گفته لوکاس بایر ، یکی از اعضای تیم فنی Operai ، این مشکل خطایی در کد سیستم بود. در یک انتشار X نوشت:
کد اصلی آن با پایه مشکل دارد. این واقعیت که آنها دو بار آزمایش را انجام داده اند و نتایج کاملاً متفاوتی داشته اند ، باید آنها را حفظ و تأیید بیشتری کند.
در گزارشی که در روز جمعه منتشر شد ، ساکانا اعتراف کرد که سیستم وی نوعی “حذف” پیدا کرده است و در واقع از نقص کد برای دستکاری نتایج به جای بهبود عملکرد استفاده کرده است. چنین پدیده ای نیز در مدلهای هوش مصنوعی یافت می شود که برای بازی در بازی هایی مانند شطرنج آموزش دیده اند.
به گفته ساکانا ، سیستم وی توانسته است فرآیندهای اعتبار سنجی را از طریق سوراخ های موجود در کد ارزیابی تأیید کند ، که منجر به نتایج غیر واقعی و فریبنده شده است. این شرکت اعلام کرده است که این مشکل را حل کرده است و قصد دارد ادعاهای قبلی خود را بررسی و تصحیح کند.
این شرکت در بیانیه ای گفت:
ما مکانیسم ارزیابی و اجرای آزمایشات را بهبود بخشیده ایم تا چنین مشکلاتی رخ ندهد. علاوه بر این ، ما مقاله خود را اصلاح می کنیم تا یافته های جدید را در بر بگیریم. ما از این خطا از مخاطبان خود عذرخواهی می کنیم و به زودی نسخه اصلاح شده ای از این تحقیق را ارائه خواهیم داد.
اگر این ادعا خیلی خوب به نظر برسد ، احتمالاً خوب نیست! این داستان بار دیگر خاطرنشان کرد که در دنیای هوش مصنوعی ، باید با ادعاهای بزرگ و خارق العاده محتاط باشید.