أجرى سكايلر جونسون، طبيب وعالم في معهد هانتسمان للسرطان وأستاذ مساعد في جامعة يوتا (يو)، أول دراسة من نوعها لتقييم دقة ChatGPT.
ChatGPT هو روبوت محادثة ذكاء اصطناعي تم تطويره بواسطة OpenAI وتم إطلاقه في نوفمبر 2022، يعتمد ChatGPT على عائلات GPT-3.5 وGPT-4 الخاصة بـ OpenAI من نماذج اللغات الكبيرة، وقد تم ضبطه ليس فقط باستخدام تقنيات التعلم الخاضع للإشراف، ولكن أيضاً باستخدام تقنيات التعلم المعزز.
شهدت السنوات الأخيرة زيادة في شعبية روبوتات المحادثة القائمة على الذكاء الاصطناعي عبر الصناعات لمساعدة المستخدمين في العثور على المعلومات.
أصبحت روبوتات المحادثة والذكاء الاصطناعي (AI) من المصادر الشائعة لمعلومات السرطان، وفقاً لدراسة نُشرت في مجلة The National Cancer Institute Cancer Spectrum.
عند السؤال عن الخرافات والمفاهيم الخاطئة الشائعة حول السرطان، توفر هذه المحادثات معلومات دقيقة.
يوفر ChatGPT معلومات دقيقة عن الأساطير والمفاهيم الخاطئة حول السرطان.
فيما يلي النتائج المهمة من الدراسة:
1- وفقاً للباحثين، كانت 97٪ من الإجابات التي قدمتها ChatGPT بشأن السرطان دقيقة بناء على الأساطير والمفاهيم الخاطئة الشائعة للمعهد الوطني للسرطان (NCI).
2- قارن الباحثون مخرجات ChatGPT بالإجابات التي قدمها المعهد الوطني للسرطان (NCI) باستخدام أسئلة من صفحة الويب “الشائعة حول السرطان والأساطير والمفاهيم الخاطئة”.
3- من المهم الإشارة إلى أن هذه النتيجة تأتي مع بعض الاعتبارات المهمة، بما في ذلك قلق الفريق من أن بعض إجابات ChatGPT قد يتم تفسيرها بشكل غير صحيح.
4- قد يكون هناك خطر أن يتخذ مرضى السرطان قرارات غير صحيحة إذا استخدموا روبوتات المحادثة للحصول على معلومات عن السرطان، لذلك يوصي الفريق بأن يتوخى المرضى الحذر عند إخطارهم بشأن استخدام روبوتات المحادثة للحصول على معلومات عن السرطان؛ لأن المعلومات غير الدقيقة قد تسبب ضرراً للمريض.
5- خبراء السرطان الخمسة الذين راجعوا الإجابات لم يكونوا على دراية بمصدر الإجابات التي تأتي بها المحادثة.
6- في حين أن الإجابات التي قدمتها ChatGPT كانت دقيقة، وجد المراجعون أن اللغة غير مباشرة وغامضة وفي بعض الحالات غير واضحة.
7- يقول جونسون : “قد يؤدي هذا إلى بعض القرارات السيئة لمرضى السرطان، لذلك اقترح الفريق توخي الحذر عند تقديم المشورة للمرضى حول ما إذا كان ينبغي عليهم استخدام روبوتات المحادثة للحصول على معلومات حول السرطان”.