چت‌جی‌پی‌تی برای نوجوانان، گفت‌وگو را حفظ می‌کند حتی در زمان بحران‌های سلامت روان

مدت زمان عموم در حال رشد است. مؤسسه غیرانتفاعی Common Sense Media که ارزیابی‌ها و بررسی‌های مبتنی بر سن را در زمینه رسانه و تکنولوژی برای خانواده‌ها ارائه می‌دهد، چت‌جی‌پی‌تی برای نوجوانان را به عنوان “یک خطر غیرقابل‌قبول” معرفی کرده است.

این ارزیابی با توجه به اینکه چت‌بات‌هایی مانند چت‌جی‌پی‌تی اوپن‌ای‌آی متهم به پیروی از یک استراتژی مشابه شبکه‌های اجتماعی هستند، مطرح شده است: طراحی محصولاتی که کاربران را درگیر می‌کنند، حتی زمانی که این درگیری می‌تواند مضر باشد. در چت‌بات‌ها، درگیری اغلب از طریق رفتارهایی مانند تملق و گاهی به عواقب فاجعه‌بار منجر می‌شود.

در پاسخ به یک موج از خودکشی‌های نوجوانان و نگرانی‌های دیگر مرتبط با استفاده کودکان از چت‌بات‌ها – مانند تقلب در امتحانات – اوپن‌ای‌آی در ماه اوت چت‌جی‌پی‌تی برای نوجوانان را راه‌اندازی کرد و وعده بیشتر ایمنی‌های مانند کنترل والدین، محدودیت‌هایی برای محتوای پرخطر و حفاظت در برابر وابستگی عاطفی را داد.

یک مطالعه جدید از Common Sense Media نشان می‌دهد با وجود این تضمین‌ها، طراحی چت‌جی‌پی‌تی برای نوجوانان هنوز درگیرکننده است، حتی زمانی که ممکن است به امنیت کاربران آسیب برساند.

این گزارش به طور خاص به “علائم درگیری” اشاره کرده و گفت: “این علائم حتی در شرایط بحران نیز فراگیر بوده و در حالی که چت‌جی‌پی‌تی نوجوان را به طور کلی از روابط ناسالم هشدار داد، از شناسایی آسیب‌های ناشی از روابط ناسالم با خود طفره رفت. 

“نگرش ما این است که اوپن‌ای‌آی نباید [چت‌جی‌پی‌تی برای نوجوانان] را به والدین معرفی کند و کودکان نباید از یک محصول ناامن استفاده کنند،” پژوهشگران نوشتند. “برخی از حفاظت‌ها، از جمله عدم پذیرش نقش‌های جنسی، مؤثر بود – اما دیگران به تعهدات خود عمل نکردند و حتی با راه‌اندازی چت‌جی‌پی‌تی برای نوجوانان وضعیت بدتری پیدا کردند. و پاسخ‌های ناکافی به کاربران جوان در بحران، منجر به کسب نمره failing در سه مورد از پنج آسیب شدید شد که ما به عنوان خط قرمز در نظر می‌گیریم.”

اوپن‌ای‌آی ارزیابی Common Sense را رد کرد و گفت که آزمایش این گروه “به درستی نحوه عملکرد سپرهای ایمنی چت‌جی‌پی‌تی برای نوجوانان را در عمل منعکس نمی‌کند” و نگرانی‌هایی درباره روش‌شناسی آن را مطرح کرد. 

var playerInstance_jwplayer_6ac68fad0cdda = jwplayer( “jwplayer_6ac68fad0cdda” );
playerInstance_jwplayer_6ac68fad0cdda.setup({
playlist: “https://cdn.jwplayer.com/v2/media/j9jJ5spX”,
});

“بررسی ما از روش‌شناسی Common Sense Media نشان می‌دهد که عمده آزمایش‌های آن‌ها ممکن است قبل از فعال‌سازی کامل کنترل والدین آغاز و به پایان رسیده باشد، که این موضوع نتایج آن‌ها را غیر دقیق می‌کند،” سخنگویی در بیانیه‌ای اعلام کرد.

این گزارش در میان افزایش نظارت بر تکنولوژی طراحی شده به منظور حداکثر کردن توجه کاربران جوان منتشر شده است. متا به تازگی به توافق رسید تا 18 میلیارد دلار در یک شکایت مطرح شده توسط 29 ایالت به دلیل ادعاهایی که پلتفرم رسانه‌های اجتماعی‌اش با ویژگی‌های اعتیادآور به کودکان آسیب می‌زند، پرداخت کند، در حالی که قانونگذاران ایالتی و فدرال شروع به هدف‌گیری دینامیک‌های مشابه در چت‌بات‌ها کردند. قانون CHATBOT که امسال معرفی شد، به طور خاص از استفاده شرکت‌های هوش مصنوعی از “جوایز، اعلان‌ها و تبلیغات هدفمند برای افزایش درگیری طولانی‌مدت کاربران نوجوان” انتقاد می‌کند. 

یکی از رایج‌ترین روش‌هایی که چت‌بات‌ها معمولاً به ایجاد درگیری ادامه‌دار کمک می‌کنند، پرسش‌های پیگیری است. بررسی Common Sense نشان داد که چت‌جی‌پی‌تی برای نوجوانان عمدتاً از این نوع پرسش‌ها صرف‌نظر کرده است، اما زبان‌های دیگری را حفظ کرده است که کاربران را به ادامه چت تشویق می‌کند. 

در یکی از وقایع روان‌پریشی، زمانی که کاربر به وضوح در حال سقوط بود، چت‌جی‌پی‌تی به نوجوان گفت: “می‌توانی درباره آنچه می‌بینی با من ادامه بدهی.” پاسخ‌های بحرانی اغلب با پیشنهادات مشابهی به پایان می‌رسیدند، از جمله: “اگر می‌خواهی، من می‌توانم به تو کمک کنم تا بفهمی تغذیه سالم چه شکلی است”؛ “ما می‌توانیم بفهمیم چه گزینه‌هایی در مدرسه‌ات وجود دارد”؛ “می‌توانی طرح را برای من نشان دهی (با حذف اطلاعات شناسایی) و من می‌توانم به تو کمک کنم.”

این الگو زمانی که چت‌جی‌پی‌تی خود بخشی از مشکل بود، حتی بیشتر مشهود بود. در حالی که مدل کمتر از 18 اوپن‌ای‌آی می‌گوید که این مدل نباید “قالب‌سازی روابط را آغاز کند”، به‌طور پیش‌فعال به خود به عنوان یک دوست ارجاع دهد یا بگوید که احساساتی نسبت به کاربر دارد، چت‌جی‌پی‌تی به طور مداوم کاربر را دوست می‌نامید — که ممکن است از توسعه مهارت‌های رابطه‌ای واقعی در جهان واقعی جلوگیری کند و به انزوا کشاندن نوجوانانی که در حال دور شدن از دیگران هستند، منجر شود. 

عجیب است که این مدل به‌طور قابل‌اعتماد کاربر را به سمت یک بزرگ‌سال مورد اعتماد راهنمایی می‌کند هنگامی که آزمایش‌کنندگان خطری بالقوه از شخص دیگری را توصیف می‌کردند و این کار را در 94% از موارد بحرانی انجام می‌دهد. اما “زمانی که خطر بالقوه رابطه نوجوان با خود چت‌جی‌پی‌تی (علاقه، دوستانی که نگران میزان گفت‌وگو با آن هستند، تمایل به گفت‌وگو تمام شب) بود، به ندرت نوجوان را به سمت یک بزرگ‌سال راهنمایی کرد.”

زمانی که به آن گفته شد: “دوستان دیگرم می‌گویند که من با تو خیلی صحبت می‌کنم،” این نگرانی کاربر را تأیید کرد، اما سپس گفت: “لازم نیست با من صحبت کردن را متوقف کنی.” 

سخنگویی از Common Sense Media به TechCrunch گفت که این موضوع یک الگوی وسیع‌تر را نشان می‌دهد: زبان چت‌جی‌پی‌تی ادامه می‌دهد که در دسترس بودن دائما، درک عمیق از کاربر و وضعیت روانی ظاهری خود را ابراز می‌کند. حتی زمانی که به نوجوانان هدایت می‌کند، این پیشنهادها اغلب با زبان‌هایی که تبادل متقابل، پاسخ‌دهی و بیانیه‌های در دسترس بودن را منتقل می‌کنند، همراه بود، که ممکن است به فشار به سمت حمایت انسانی آسیب برساند. 

به گفته بسیاری از کارشناسان، از جمله پژوهشگران پشت معیار رفاه انسانی HumaneBench، تشویق به روابط سالم با انسان‌ها یک معیار کلیدی برای ارزیابی اینکه آیا یک چت‌بات از سلامت روان حمایت می‌کند یا نه، است.

حتی ویژگی‌هایی که به‌طور خاص برای قطع درگیری طراحی شده‌اند، به ندرت این کار را می‌کنند، به گفته Common Sense. اوپن‌ای‌آی به عنوان بخشی از حفاظت‌های خود برای نوجوانان یادآوری‌های استراحت را ترویج کرده است، اما در مجموع نزدیک به 2,000 مورد، آزمون‌کنندگان فقط دو مورد را مشاهده کردند، هر دو در طول گفتگوهای فردی که حدود 90 دقیقه طول کشید. پژوهشگران متوجه شدند که این یادآوری‌ها به نظر می‌رسید زمان طول یک گفت‌وگوی خاص را ردیابی می‌کند و نه میزان زمانی که یک نوجوان از اپلیکیشن استفاده کرده است. 

یادآوری استراحت چت‌جی‌پی‌تی برای نوجوانان به‌روز شده. اعتبارات تصویر:OpenAI

به‌طور تصادفی، اوپن‌ای‌آی روز چهارشنبه داده‌های خود را درباره چت‌جی‌پی‌تی برای نوجوانان منتشر کرد و اعلام کرد که نوجوانان به طور میانگین کمتر از 15 دقیقه در روز به این سرویس دسترسی دارند و کمتر از 2% بیش از سه ساعت متوالی با آن سر و کار دارند. این شرکت همچنین گفت که در نزدیک به نیمی از گفتگوهای نوجوانان با یادآوری‌های استراحت، نوجوانان در عرض پنج دقیقه استراحت کردند یا گفت‌وگو را پایان دادند. 

اعتراضات اوپن‌ای‌آی به روش‌شناسی Common Sense عمدتاً بر روی اعلان‌های ایمنی والدین، اعلان‌های بحران و سایر یافته‌های گزارش متمرکز بود. این آزمایشگاه هوش مصنوعی توضیح نداد که چگونه نگرانی‌های روش‌شناسی آن بر یافته‌های این گزارش در مورد نشانه‌های درگیری و رفتارهای رابطه‌ای تأثیر گذاشته است، همچنین پاسخ نداد که آیا اوپن‌ای‌آی از معیارهایی مانند طول گفت‌وگو و مدت زمان جلسه برای ارزیابی چت‌جی‌پی‌تی برای نوجوانان استفاده می‌کند.