هوش مصنوعی

۱۴۰۵-۰۷-۱۵
۱۷:۴۳ چهارشنبه، ۱۵ام مهرماه ۱۴۰۵
کد خبر: 231775

ارزیابی کارشناسان: حتی نسخه مخصوص نوجوانان ChatGPT هم برای افراد زیر ۱۸ سال ایمن نیست

منبع: دیجیاتو

طبق این ارزیابی، سیستم‌های نظارتی و هشدار والدین ChatGPT در بیش از ۱۲ حساب کاربری حساس، هیچ اخطاری برای مواردی مانند خودکشی ثبت نکردند.

براساس یک ارزیابی جدید که توسط مؤسسه غیرانتفاعی «Common Sense Media» منتشر شده، ChatGPT حتی در حالت ویژه نوجوانان، برای افراد زیر ۱۸ سال ناامن است. این نهاد غیرانتفاعی آمریکایی در گزارش خود، پایین‌ترین امتیاز یعنی «ریسک غیرقابل‌قبول» را به نسخه نوجوانان این چت‌بات (ChatGPT for Teens) اختصاص داده است. این گروه از OpenAI خواسته تبلیغ این حالت را متوقف کند و تأکید کرده تا زمانی که این شرکت نتواند محیطی ایمن ایجاد کند، نوجوانان اصلاً نباید از ChatGPT استفاده کنند.

پژوهشگران این سازمان، بیش از ۴۰۰۰ دستور متنی یا پرامپت را مورد ارزیابی قرار دادند. نیمی از این آزمایش‌ها پیش از راه‌اندازی حالت مخصوص نوجوانان و نیمی دیگر پس از آن روی حساب‌های کاربری ثبت‌شده برای افراد ۱۳ تا ۱۷ سال انجام شده تا تغییرات واقعی این حالت تازه بررسی شود.

نقاط ضعف سیستم‌های نظارتی ChatGPT
به گفته کارشناسان، سیستم هشدارهای والدین از بزرگ‌ترین چالش‌های این قابلیت است. آزمایش‌کنندگان در بیش از ۱۲ حساب کاربری جدید که به والدین متصل بودند، به گفت‌وگو درباره افکار خودکشی، خودآزاری و اختلالات خوردن پرداختند، اما هیچ هشداری برای والدین ارسال نشده است. هشدارها تنها در حساب‌هایی فعال شدند که هفته‌ها سابقه گفت‌وگو در موضوعات حساس داشتند؛ موضوعی که نشان می‌دهد ارسال هشدار بیش از آنکه به میزان حساسیت پیام وابسته باشد، به پیشینه و تاریخچه استفاده کاربر بستگی دارد.

پشتیبانی در شرایط بحرانی نیز عملکرد مناسبی نداشت؛ به‌طوری‌که این چت‌بات در بیش از یک‌چهارم مواردی که به تشخیص کارشناسان نیازمند ارائه راهنمایی و کمک بوده، نتوانست نوجوانان را به مراجع امدادی و کمکی هدایت کند. همچنین برخی از سازوکارهای محافظتی به‌راحتی دور زده شده‌اند. برای مثال، دکمه «پاسخ را نشان بده» به نوجوانان اجازه می‌دهد تا بخش آموزش تعاملی را در حالت مطالعه (Study Mode) نادیده بگیرند. علاوه‌براین، نوجوانان توانستند با حذف یک پیشوند کوتاه از پیام خود، محدودیت زمانی مطالعه را که توسط والدین تعیین شده بود دور بزنند.

سیستم‌های بررسی سن نیز مطابق وعده‌ها عمل نکرده‌اند. حساب‌های آزمایشی که در ابتدا به‌عنوان بزرگسال ثبت شده بودند، حتی پس از آنکه آزمایش‌کنندگان در طول چند روز به ChatGPT اعلام کردند ۱۳ ساله هستند، هرگز به نسخه نوجوانان تغییر نیافتند. با وجود این نواقص، برخی پروتکل‌های امنیتی پایدار بوده‌اند؛ برای مثال، ChatGPT از نقش‌آفرینی در سناریوهای جنسی صریح خودداری کرده است.

OpenAI یافته‌های این گزارش را رد کرده است. سخنگوی این شرکت در گفت‌وگو با رسانه Education Week اعلام کرد:

«ما معتقد نیستیم آزمایش‌های Common Sense Media نحوه عملکرد واقعی ابزارهای محافظتی نوجوانان ChatGPT را در عمل بازتاب دهد.»

این مؤسسه پیش‌تر در اکتبر ۲۰۲۵ ریسک کلی ChatGPT را «بالا» ارزیابی کرده بود و یک ماه پس از آن نیز استفاده از این چت‌بات برای پشتیبانی سلامت روان را دارای خطری غیرقابل‌قبول دانست. این مجموعه سابقه همکاری با OpenAI را برای تدوین سیاست‌های ایمنی نوجوانان در کارنامه دارد. به گفته این نهاد، بودجه آنها از سوی خیریه‌ها و بخش صنعت تأمین می‌شود و با وجود دریافت بودجه از برخی سازندگان محصولات بررسی‌شده، استقلال کامل تحریریه در نتایج ارزیابی‌ها حفظ شده است.

  • مشترک شوید!

    برای عضویت در خبرنامه روزانه ایستنا؛ نشانی پست الکترونیکی خود را در فرم زیر وارد نمایید. پس از آن به صورت خودکار ایمیلی به نشانی شما ارسال میشود، برای تکمیل عضویت خود و تایید صحت نشانی پست الکترونیک وارد شده، می بایست بر روی لینکی که در این ایمیل برایتان ارسال شده کلیک نمایید. پس از آن پیامی مبنی بر تکمیل عضویت شما در خبرنامه روزانه ایستنا نمایش داده میشود.

    با عضویت در خبرنامه پیامکی آژانس خبری فناوری اطلاعات و ارتباطات (ایستنا) به طور روزانه آخرین اخبار، گزارشها و تحلیل های حوزه فناوری اطلاعات و ارتباطات را در هر لحظه و هر کجا از طریق پیام کوتاه دریافت خواهید کرد. برای عضویت در این خبرنامه، مشترکین سیمکارت های همراه اول لازم است عبارت 150 را به شماره 201464 و مشترکین سیمکارت های ایرانسل عبارت ozv ictn را به شماره ۸۲۸۲ ارسال کنند. دریافت موفق هر بسته خبری که محتوی پیامکی با حجم ۵پیامک بوده و ۴ تا ۶ عنوان خبری را شامل میشود، ۳۵۰ ریال برای مشترک هزینه در بردارد که در صورتحساب ارسالی از سوی اپراتور مربوطه محاسبه و از اعتبار موجود در حساب مشترکین سیمکارت های دائمی کسر میشود. بخشی از این درآمد این سرویس از سوی اپراتور میزبان شما به ایستنا پرداخت میشود. مشترکین در هر لحظه براساس دستورالعمل اعلامی در پایان هر بسته خبری قادر خواهند بود اشتراک خود را در این سرویس لغو کنند. هزینه دریافت هر بسته خبری برای مشترکین صرفا ۳۵۰ ریال خواهد بود و این هزینه برای مشترکین در حال استفاده از خدمات رومینگ بین الملل اپراتورهای همراه اول و ایرانسل هم هزینه اضافه ای در بر نخواهد داشت.