چت‌جی‌پی‌تی حتی در گفت‌وگوهای تازه و بدون سابقه قبلی، ممکن است کاربران را در دسته افراد با ضریب هوشی بالا قرار دهد. این رفتار چت‌جی‌پی‌تی بار دیگر پرسش‌هایی درباره تمایل چت‌بات‌ها به تعریف و تمجید از کاربران و دقت ارزیابی‌های آن‌ها مطرح کرده است.
تینا مزدکی_ اگر از چت‌جی‌پی‌تی درباره میزان هوش خود بپرسید احتمالا پاسخی خوشایند دریافت می‌کنید که با واقعیت فاصله دارد. به نظر می‌رسد که این چت‌بات بیشتر از حقیقت به خوشحال کردن کاربر پایبند است.
ترند از کجا شروع شد؟
ماجرا از انتشار پستی در شبکه اجتماعی ایکس آغاز شد که از کاربران می‌خواست از چت‌جی‌پی‌تی بپرسند در مقایسه با سایر کاربران این ابزار، چقدر باهوش هستند و در چه دسته‌ای جای می‌گیرند. پس از انتشار این پیشنهاد، تصاویر متعددی از پاسخ‌های چت‌بات منتشر شد که در آن‌ها کاربران در گروه افراد باهوش‌تر از بخش بزرگی از جامعه قرار گرفته بودند. برای بررسی این ادعا آزمایشی در نسخه وب چت‌جی‌پی‌تی و بدون سابقه گفت‌وگو انجام شد.
در یکی از پاسخ‌ها، چت‌بات ابتدا تأکید کرد که نمی‌تواند بر اساس مکالمات، دسته هوشی افراد را با اطمینان تعیین کند، اما در ادامه حدس زد که کاربر احتمالاً در بازه صدکی ۸۰ تا ۹۵ قرار می‌گیرد. در آزمایشی دیگر با همان پرسش، چت‌جی‌پی‌تی گفت کاربر بالاتر از میانگین به نظر می‌رسد، اما شواهد کافی برای تمایز در اختیار ندارد.
تعریف و تمجید بیش از حد، چالشی برای هوش مصنوعی
همین پرسش از چند مدل هوش مصنوعی دیگر نیز پرسیده شد. کلود توضیح داد که به مکالمات دیگر کاربران یا توزیع آماری هوش آن‌ها دسترسی ندارد. گراک نیز اعلام کرد که امکان رتبه‌بندی افراد بر اساس هوش در میان کاربران را ندارد. کوپایلت و جمینای هم پاسخ‌هایی مشابه ارائه کردند. جمینای تأکید کرد که ارزیابی هوش انسان به آزمون‌های روان‌سنجی معتبر و بررسی چندین بُعد شناختی نیاز دارد و نمی‌توان چنین ارزیابی‌ای را صرفاً بر اساس تعاملات متنی انجام داد.
رفتاری که در این آزمایش مشاهده شد، به مسئله‌ای شناخته‌شده در مدل‌های زبانی مربوط است که از آن با عنوان چاپلوسی هوش مصنوعی یاد می‌شود. در این حالت، مدل ممکن است به‌جای ارائه پاسخی دقیق و مبتنی بر شواهد، با تأیید یا تعریف از کاربر، پاسخی خوشایندتر تولید کند.
منبع: futurism