ChatGPT زود پیر شد!

پژوهشگران دانشگاه استنفورد و کالیفرنیا برکلی با مقایسه عملکرد مدل های زبانی بزرگ GPT-3.

5 و GPT-4 توسعه یافته توسط شرکت OpenAI ادعا می کنند که عملکرد و دقت ربات گفتگوگر ChatGPT در طول زمان کاهش یافته است.

- جی پلاس، به نقل از استنفورد، به نظر می رسد که مرحله ماه عسل برای مدل های زبانی بزرگ(LLM) که با عجله برای نفوذ به فضای هوش مصنوعی مولد معرفی شدند، به پایان رسیده است، چرا که بر اساس مطالعه ای که توسط پژوهشگران دانشگاه استنفورد و کالیفرنیا برکلی انجام شده، عملکرد مدل های زبانی بزرگ شرکت OpenAI در طول زمان به طور قابل توجهی کاهش یافته است.

پژوهشگران با توجه به این که این مدل ها می توانند بر اساس داده ها، بازخورد کاربران و تغییراتِ طراحی، به روز شوند، می خواستند ببینند که آیا این مدل های زبانی بزرگ در حال بهبود هستند یا نه؟ این تیم رفتار نسخه های عرضه شده در ماه مارس 2023 و ماه ژوئن 2023 از مدل های GPT-3.

5 و GPT-4 را در چهار وظیفه ارزیابی کردند.

اولی حل مسائل ریاضی، دومی پاسخ دادن به سوالات حساس یا خطرناک، سومی تولید کد و چهارمی ارزیابی مدل ها در استدلال بصری بود.

قابلیت های متنوع مدل های زبانی بزرگ گزارش شرکت OpenAI هنگام معرفی GPT-4 در ماه مه امسال ادعا کرد که GPT-4 بسیار قابل اعتمادتر و خلاقانه تر است و می تواند دستورالعمل های ظریف تری را نسبت به GPT-3.