چت‌بات‌ها وقتی با زبان رسمی با آنها صحبت کنید، بهترین عملکرد را دارند

تحقیقات جدید نشان می‌دهد که چت‌بات‌ها وقتی با زبان رسمی با آنها صحبت کنید، بهترین عملکرد را دارند. این یافته می‌تواند شیوه تعامل ما با هوش مصنوعی را تغییر دهد.

شیوه تعامل ما با چت بات‌ها از موضوعات مهم در حوزه هوش مصنوعی است. پژوهش‌های اخیر نشان می‌دهد که استفاده از زبان غیر رسمی در گفتگو با این دستیاران هوشمند، می‌تواند بر دقت و کارایی پاسخ‌های آن‌ها تاثیر منفی بگذارد.

بررسی تفاوت‌های گفتاری انسان و هوش مصنوعی

پژوهشگران آمازون، فولی ژانگ و ژو یو، با استفاده از مدلClaude 3.5 Sonnetبه تحلیل مکالمات کاربران با دستیاران چت‌بات هوش مصنوعی و مقایسه آن با تعاملات انسانی پرداختند. یافته‌های آن‌ها نشان داد که مردم هنگام صحبت با چت‌بات‌ها، از گرامر کمتر دقیق استفاده کرده و بی‌ادب‌تر عمل می‌کنند؛ همچنین، دامنه واژگان آن‌ها کمی محدودتر است. بر اساس امتیازاتClaude، تعاملات انسان‌به‌انسان ۱۴.۵ درصد رسمی‌تر و مودبانه‌تر، ۵.۳ درصد روان‌تر و ۱.۴ درصد از نظر واژگانی متنوع‌تر بود.

نویسندگان اشاره کردند که این رفتار احتمالا به‌دلیل برداشت کاربران از مدل‌های زبانی بزرگ (LLM) به‌عنوان موجوداتی با حساسیت اجتماعی کمتر یا قابلیت تفسیر ظریف‌تر پایین‌تر است.

زبان رسمی؛ کلید بهترین عملکرد چت‌بات‌ها

این پژوهشگران در مرحله دوم، یک مدل هوش مصنوعی به نامMistral 7B را روی ۱۳ هزار مکالمه واقعی انسان‌به‌انسان آموزش دادند تا ۱,۳۵۷ پیام ارسال‌شده به چت‌بات‌ها را تفسیر کند. به‌دلیل آموزش بر مبنای مکالمات انسانی، Mistralدر شناسایی صحیح هدف مکالمات چت‌بات‌ها با مشکل مواجه شد. آن‌ها سپس روش‌های مختلفی را برای بهبود درک هوش مصنوعی آزمایش کردند. ابتدا بازنویسی پیام‌های کاربران به نثر انسان‌مانند با استفاده ازClaudeانجام شد که دقت را ۱.۹ درصد کاهش داد. بازنویسی حداقلی نیز دقت را ۲.۶ درصد پایین آورد. حتی بازنویسی غنی‌تر با زبان رسمی‌تر، دقت را ۱.۸ درصد کاهش داد.تنها با آموزش مدل Mistral بر اساس هر دو بازنویسی حداقلی و غنی‌شده بود که عملکرد آن ۲.۹ درصد بهبود یافت.

یک پژوهشگر از دانشگاه بنتلی در ماساچوست معتقد است که تفاوت شیوه صحبت با ربات‌ها و انسان‌ها تعجب‌آور نیست و لزوما نقطه ضعفی برای چت‌بات‌ها محسوب نمی‌شود. او این تطبیق رفتار کاربران را سالم‌تر از تلاش برای از بین بردن شکاف بین انسان و ربات می‌داند.

بیشتر بخوانید

• چت جی‌پی‌تی در حال تبدیل شدن به یک سیستم عامل دیجیتالی همه‌کاره است
• مکالمات شما با چت‌جی‌پی‌تی امن نیست؛ اوپن‌ای‌آی همه چیز را رصد می‌کند
• هوش مصنوعی قادر به درک تعارف ایرانی ها نیست!
• چت‌بات‌های هوش مصنوعی از خودشان حرف درمیاورند و این قابل حل نیست!