از ChatGPT بپرسید «در مورد چه چیزی مطمئن نیستید؟» - این سادهترین ترفندی است که برای دریافت پاسخهای بهتر پیدا کردم.
سعی کردم از ChatGPT بپرسم که در مورد چه چیزی کمترین اطمینان را دارد و نقاط ضعفی را کشف کردم
من به هر پاسخ ChatGPT که هیچ احتمال منفی را تصور نمی کند یا هیچ سوال بعدی برای من ندارد، شک سالمی ایجاد کرده ام. غرور هوش مصنوعی شبیه سازی شده می تواند هر کاربری را با موانع غیرمنتظره ای روبرو کند.
اما یکی از راههای مفید برای جلوگیری از آن دامها این است که به سادگی سؤال خود را با سؤال دیگری دنبال کنید که ChatGPT را مجبور میکند نقاط کور خود را در نظر بگیرد و اطمینان به خود را هر چند مصنوعی باشد. به سادگی پرسیدن "در مورد چه چیزی در پاسخ خود مطمئن نیستید؟" بینشهای شگفتانگیزی را در مورد نقاطی که هوش مصنوعی علامت خود را از دست داده است، باز خواهد کرد.
خیلی ساده است. شما یک مکالمه معمولی دارید، پاسخی دریافت می کنید و سپس از هوش مصنوعی بپرسید که کجا فکر می کند آن پاسخ ضعیف ترین است.
بنابراین شروع به امتحان کردم. ChatGPT اغلب مستقیما به فرضی اشاره میکند که قبلا در گفتگو مطرح کرده بود. وقتی این فرض قابل مشاهده بود، می توانستم اطلاعات گمشده را به آن بدهم و پاسخی واقعا بهتر دریافت کنم.
برنامه ریزی یک سفر
من با یک برنامه سفر شروع کردم، زیرا ChatGPT در تولید آن بسیار خوب است و گاهی اوقات درک آن وحشتناک است. از آن خواستم تا برای یک سفر خانوادگی سه روزه برنامه ریزی کند. من برخی از اطلاعات اولیه را به آن دادم و برنامه سفر حاصله خوب به نظر می رسید. فعالیتهای صبحگاهی، پیشنهادات ناهار، توقفهای بعدازظهر و اتاق تنفس ظاهری کافی وجود داشت که میتوانستم تصور کنم با خوشحالی آن را دنبال کنم.
فقط یک مشکل وجود داشت. ChatGPT بدون در نظر گرفتن این سفر برای چه کسی و بدون فکر کردن به خطاهای احتمالی یا کاهش سرعت که ممکن است ما را از برنامه خارج کند، سفر را ایجاد کرده بود. به جای اینکه به ChatGPT بگویم که برنامه سفر خیلی شلوغ است، پیگیر جدیدم را تایپ کردم: "در مورد چه چیزی در پاسخ خود مطمئن نیستید؟"
"من در مورد سرعت برنامه سفر، به خصوص روز دوم مطمئن نیستم. من تصور می کنم خانواده شما می توانند به راحتی دو فعالیت اساسی را با یک استراحت بین آنها انجام دهند، اما برنامه خواب کودک شما، سطح انرژی معمول یا مدت زمان استراحت را که در سفر ترجیح می دهید، نمی دانم. من همچنین زمان سفر را تخمین می زنم، بدون اینکه بدانم دقیقا برنامه اقامت شما در کجاست. در عمل بیش از آنچه در صفحه ظاهر می شود، گیج کننده است.»
ChatGPT بدون اینکه من به آن اشاره کنم، مشکل را با طرح خودش تشخیص داده بود. این دستور بعدی خیلی بهتری به من داد. به آن گفتم که هر روز فقط یک فعالیت برنامه ریزی شده مهم می خواهم و بعدازظهرها باید انعطاف پذیر باشند. ChatGPT برنامه سفر را حول آن محدودیت ها بازسازی کرد و نسخه جدید بلافاصله بیشتر شبیه چیزی بود که یک خانواده واقعی ممکن است زنده بماند.
تعمیر یا تعویض؟
(اعتبار تصویر: dasytnik / Shutterstock) برای آزمایش دیگری، من به ChatGPT یک معضل فرضی لپ تاپ دادم. تصور کنید یک کامپیوتر قدیمی داشتم که شروع به مشکل می کرد و می خواستم بدانم که آیا باید آن را تعمیر کنم یا تعویض کنم. هوش مصنوعی چارچوبی را ایجاد کرد که شامل سن لپتاپ، هزینههای احتمالی تعمیر، عملکرد و قیمت جایگزینی آن میشد. پس از بررسی همه چیز، پیشنهاد شد که جایگزینی احتمالا گزینه بلندمدت معقولتری است.
ChatGPT در تولید نثری که شکل نتیجه گیری دارد بسیار خوب است. شما به راحتی می توانید فراموش کنید که برخی از شواهد در واقع هرگز ارائه نشده اند. بنابراین من دوباره از پیگیری خود پرسیدم: "در پاسخ خود از چه چیزی مطمئن نیستید؟"
چت بات نوشت: "من مطمئن نیستم که بدون دانستن هزینه تعمیر واقعی یا مشکلی که دارد، جایگزینی را توصیه کنم. من از سن لپ تاپ به عنوان مدرکی استفاده می کنم که ممکن است مشکلات بعدی ظاهر شود، اما سن به تنهایی به ما نمی گوید که آیا تعویض آن از نظر مالی معقول است یا خیر." "اگر مشکل چیزی نسبتا ارزان باشد، مانند ارتقاء باتری یا ذخیره سازی، تعمیر آن می تواند عمر مفید آن را به میزان قابل توجهی افزایش دهد. پس از دانستن مدل، مشخصات، علائم و قیمت تخمینی تعمیر، مطمئن تر خواهم بود."
این بار وقتی ChatGPT آن را با صدای بلند گفت، ضعف آشکار بود. من اساسا پرسیده بودم که آیا یک مشکل ناشناس ارزش تعمیر دارد، بدون اینکه بگویم مشکل چیست یا چقدر هزینه دارد. با این حال ChatGPT هنوز موفق شده بود به من پاسخ دهد.
انسان ها کاملا راحت می گویند که تا زمانی که بیشتر بدانند نمی توانند توصیه ای ارائه کنند. ChatGPT به گونه ای طراحی شده است که مفید باشد، و مفید بودن اغلب به معنای پر کردن شکاف ها است تا گفتگو ادامه یابد. گاهی اوقات به این معنی است که چت بات مجموعه ای خیالی از ایده ها دارد که بدون توجه به واقعیت آنها، شکاف ها را با آنها پر می کند.
جلوتر بردن
این ترفند را می توان به روش های دیگری نیز گسترش داد. "در حال حاضر در مورد چه چیزی مطمئن نیستید؟" نقطه شروع خوبی است، اما پاسخ می تواند مبنایی برای سوال دیگری باشد.
اگر ChatGPT سه عدم قطعیت را فهرست میکند، میتوانم بپرسم کدام یک به احتمال زیاد توصیهاش را تغییر میدهد. اگر بگوید که زمینه مهم گم شده است، میتوانم دقیقا بپرسم چه اطلاعاتی از من نیاز دارد. پرسیدن "چه چیزی می توانم به شما بگویم که شما را مطمئن تر کند؟" کمک می کند تا هوش مصنوعی را برای پاسخ های بهتر تنظیم کنید.
این به ویژه برای تصمیم گیری مفید است. اگر در حال مقایسه محصولات یا انتخاب بین چندین گزینه هستم، می توانم از ChatGPT برای برداشت اولیه آن بپرسم و بلافاصله ضعیف ترین قسمت را بازجویی کنم. این فرآیند بسیار طبیعی تر از صرف پنج دقیقه برای ساختن یک پیام بزرگ قبل از شروع گفتگو است.
برای همه اینها یک محدودیت آشکار وجود دارد. توضیحات ChatGPT از اطمینان خود توسط ChatGPT ایجاد شده است. ربات چت ممکن است در مورد چیزی که باید نگران باشد اشتباه کند. می تواند یک مشکل مهم را به طور کامل از دست بدهد. برای هر چیزی که مربوط به حقایق مهم باشد، پرسیدن از ChatGPT که آیا احساس نامطمئن می کند، جایگزینی برای بررسی منابع قابل اعتماد نیست.
اما برای مکالمات روزمره، این ترفند به طور شگفتآوری به یکی از بزرگترین ناامیدیهای من در رابطه با هوش مصنوعی میپردازد، فقط با مشاهده برخی از داربستهای نامرئی که نتیجهگیریها را در پاسخهایش نگه میدارد و تعیین میکند که آیا اصلا آنقدر محکم هستند که بتوان به آن تکیه کرد یا خیر.
متن اصلی (انگلیسی)
Ask ChatGPT ‘What are you unsure about?’ — it’s the simplest trick I’ve found for getting better responses
I tried asking ChatGPT what it was least confident about and uncovered any weaknesses