کد خبر ۱۱۲۳۰۹۴
تاریخ انتشار: ۰۷:۴۷ - ۲۳-۰۹-۱۴۰۴
کد ۱۱۲۳۰۹۴
انتشار: ۰۷:۴۷ - ۲۳-۰۹-۱۴۰۴

هوش مصنوعی همه‌چیزدان نیست؛ دقت ۶۹ درصدی پیشرفته‌ترین مدل‌ها

هوش مصنوعی همه‌چیزدان نیست؛ دقت ۶۹ درصدی پیشرفته‌ترین مدل‌ها
آمار جدید محققان گوگل نشان می‌دهد که حتی پیشرفته‌ترین مدل هوش مصنوعی موجود دقت ۶۹ درصدی دارد.

گوگل تصویری نگران‌کننده از میزان دقت هوش مصنوعی در بیان حقایق به دست آورد. گوگل دیپ‌مایند هفته‌ی گذشته از مجموعه‌ی بنچمارک FACTS رونمایی کرد؛ ابزاری برای سنجش اعتبار و درستی پاسخ‌های مدل‌های AI.

به گزارش زومیت، این بنچمارک مدل‌ها را در چهار حوزه‌ی کلیدی به چالش می‌کشد: پاسخ به پرسش‌های واقعی بر اساس دانش درونی، استفاده‌ی مؤثر از جست‌وجوی وب، استناد دقیق به اسناد طولانی و تفسیر تصاویر. در این آزمون، جمنای ۳ پرو گوگل با کسب امتیاز ۶۹ درصد، بهترین عملکرد را به ثبت رساند؛ درحالی‌که سایر مدل‌های پیشرو با اختلاف فاحشی پایین‌تر از این سطح قرار گرفتند.

آمار مذکور باید زنگ خطری جدی برای کسب‌وکارهایی باشد که روی هوش مصنوعی شرط بسته‌اند. اگرچه مدل‌ها در سرعت و شیوایی کلام بی‌نظیرند؛ اما قابلیت اطمینان آن‌ها در بیان حقایق همچنان فرسنگ‌ها با انتظارات انسانی فاصله دارد؛ به‌ویژه در وظایفی که نیازمند دانش تخصصی، استدلال پیچیده یا استناد دقیق به منابع هستند.

حتی خطاهای واقعی کوچک در صنایعی مانند امور مالی، بهداشت و درمان و حقوق می‌توانند پیامدهای ویرانگری به‌همراه داشته باشند. یکی از خبرنگاران روایت می‌کند که چگونه یک شرکت حقوقی، کارمندش را به دلیل استفاده از ChatGPT در تنظیم لایحه‌ای که مملو از پرونده‌های ساختگی بود، اخراج کرد.

بنچمارک FACTS هم هشدار است و هم نقشه‌ی راه؛ گوگل امید دارد با کاهش نقاط شکست و نحوه‌ی خطای مدل‌ها، پیشرفت در این حوزه را شتاب ببخشد. اما فعلاً پیام روشن است: هوش مصنوعی بهتر می‌شود؛ اما همچنان در حدود یک‌سوم موارد اشتباه می‌کند.

پربیننده ترین پست همین یک ساعت اخیر
ارسال به دوستان
طبیعت بهتر از هر طراح دیگری می داند چه چیزی با چه چیزی هماهنگ است! (+چند مثال در دکوراسیون داخلی) موج فروش گسترده بیت‌کوین را به سراشیبی سقوط کشاند آقای پزشکیان، عبور عزتمندانه به یک برنامه ملی نیاز دارد مقایسه دو افسانه؛ کلت M1911 آمریکا در برابر توکارف TT-33 شوروی؛ کدام یک برنده است؟ عکس روز ناسا از «پای شکارچی» و «سر جادوگر»! هشدار قرمز آنفلوانزا در ایران؛ ۱۴ استان در وضعیت هشدار بالا چرا وفادارها هم گاهی خیانت می‌کنند؟ نگاهی تازه به ریشه‌های خیانت چهارمین کیتونکست کرمان موتور در علم و صنعت ایران؛ فراخوان کرمان موتور برای حل چالش‌های صنعت خودرو با هوش مصنوعی هواپیمای انقلابی X-70 فرکتال ناسا؛‌ پرنده عجیبی که ساختارش را در آسمان تغییر می‌دهد واگذاری پتروشیمی آبادان؛ فرصت احیای یک مجتمع صنعتی با ظرفیت‌های توسعه‌ سارا پارسایی، نوازنده و بازیگر در کنسرت‌نمایش «سیاوش» با گریم متفاوت (+عکس) خسارت ۶۰ میلیارد دلاری تنگه هرمز به صادرات نفت عراق از پایتخت تا استان‌ها؛ وقتی باران به آزمونی برای ناکارآمدی زیرساخت‌ها تبدیل می‌شود آیا واقعاً اطلاعات ما درباره فضا بیشتر از اعماق اقیانوس‌ها است؟ ناصرالدین شاه در حال تماشای «تخت فیل‌سواری» در حیاط قصر(عکس)