پژوهشگران استرالیایی، عملکرد «چت‌جی‌پی‌تی» را در یک معاینه تخصصی آسیب‌شناسی قانونی بررسی کردند.

پژوهشگران «دانشگاه مانش»(Monash University) قابلیت‌های مدل هوش مصنوعی «چت‌جی‌پی‌تی»(ChatGPT) شرکت «اوپن‌ای‌آی»(OpenAI) را در بررسی پرسش‌های پیچیده و ظریف حوزه آسیب‌شناسی قانونی آزمایش کردند که اغلب شامل سناریوهای مبهم نیازمند تحلیل و تفسیر دقیق هستند.

به نقل از جین‌آنلاین، این پژوهش با هدف ارزیابی میزان اثربخشی هوش مصنوعی در مدیریت دانش پزشکی تخصصی و به‌کارگیری آن در پرونده‌های پزشکی قانونی در دنیای واقعی انجام شد. یافته‌های این پژوهش، توانایی چت‌جی‌پی‌تی را در پردازش اطلاعات پیچیده و ارائه داده‌های مرتبط با مباحث آسیب‌شناسی قانونی برجسته کردند.

«آسیب‌شناسی قانونی»(Forensic pathology) یک شاخه‌ از آسیب‌شناسی است که بر تعیین علت مرگ از راه معاینه جسد تمرکز دارد.

پژوهشگران پاسخ‌های چت‌جی‌پی‌تی را در مقایسه با استانداردهای تعیین‌شده برای دقت و عمق مورد ارزیابی قرار دادند و بر کاربردهای بالقوه آن در کمک به متخصصان این حوزه بسیار تخصصی تمرکز کردند.

استفاده از مدل‌های زبانی بزرگ مانند چت‌جی‌پی‌تی در حوزه پزشکی به سرعت در حال افزایش است، اما دقت، کیفیت استدلال و ایمنی زمینه‌ای آنها همچنان یک مشکل به شمار می‌رود. این امر به‌ویژه برای آسیب‌شناسی قانونی اهمیت دارد که در آن استدلال متعادل، حساسیت زمینه‌ای و ارتباط دقیق ضروری است. پژوهشگران در این پروژه، ارزیابی عمیقی را درباره قابلیت‌ها و محدودیت‌های چت‌جی‌پی‌تی برای آسیب‌شناسی قانونی انجام دادند تا درک خود را درباره خطرات و مزایای استفاده از مدل‌های زبانی بزرگ در پزشکی به طور گسترده‌تر بهبود ‌ببخشند.

در این پژوهش، عملکرد چت‌جی‌پی‌تی با استفاده از یک آزمون آزمایشی چندوجهی متشکل از عناصر اصلی آزمون فلوشیپ آسیب‌شناسی قانونی «کالج سلطنتی پاتولوژیست‌های استرالیا»(RCPA) مورد بررسی قرار گرفت. آزمون آزمایشی شامل پرسش‌ به سبک انشایی، وظایف مبتنی بر تصویر و گزارش موردی بود. پاسخ‌های چت‌جی‌پی‌تی به صورت کورکورانه توسط ممتحنین باتجربه براساس معیارهای استاندارد RCPA تصحیح شدند و دقت واقعی، ساختار استدلال و کیفیت ارتباط ارزیابی شد.

چت‌جی‌پی‌تی در بیشتر پرسش‌های به سبک انشایی عملکرد خوبی داشت و در موضوعاتی که به دانش تثبیت‌شده‌ نیاز داشتند، نمرات بالاتری را به دست آورد. با وجود این، عملکرد چت‌جی‌پی‌تی در کارهایی که نیاز به استدلال پیچیده، تفسیر تصویر یا تحلیل وابسته به زمینه یافته‌های کالبدشکافی داشتند، ضعیف بود. نکته مهم این است که خروجی چت‌جی‌پی‌تی همیشه روان و متقاعدکننده بیان می‌شد و احساسی را از اعتماد به نفس ایجاد می‌کرد که از دقت واقعی مستقل بود.

چت‌جی‌پی‌تی می‌تواند به طور قابل اعتمادی دانش آسیب‌شناسی قانونی جاافتاده را بازتولید کند. با وجود این، چت‌جی‌پی‌تی فاقد قابلیت‌های لازم برای وظایف سطح بالاتر است و اغلب خروجی‌های غیر قابل توجیه و گمراه‌کننده تولید می‌کند. استفاده از آن ممکن است برای اهداف اداری یا آموزشی کم‌خطر قابل قبول باشد؛ مشروط بر این که خروجی توسط متخصصان واجد شرایط به دقت بررسی شود. افراد غیرمتخصص نباید برای اطلاعات آسیب‌شناسی قانونی به چنین فناوری‌هایی اعتماد کنند. برای اطمینان از استفاده ایمن و مسئولانه، ارزیابی مداوم لازم است.

این پژوهش در «International Journal of Legal Medicine» به چاپ رسید.