ChatGPT може скласти іспит на медичну ліцензію США
Розмовний ШІ-бот ChatGPT має момент, обіцяючи змінити способи, за допомогою яких ми створюємо письмовий текст, шукаємо в Інтернеті та навчаємося.
Останнє досягнення ChatGPT? Майже складання іспиту US Medic Licensing Exam ( USMLE ).
Тут ми говоримо про іспит, відомий своєю складністю, для проходження якого зазвичай потрібно близько 300-400 годин підготовки і який охоплює все, починаючи від базових наукових концепцій і закінчуючи біоетикою.
USMLE — це фактично три іспити в одному, і компетенція, з якою ChatGPT може відповідати на його запитання, показує, що ці боти зі штучним інтелектом одного разу можуть бути корисними для медичного навчання та навіть для встановлення певних типів діагнозів.
«ChatGPT склав або наблизився до порогу складання всіх трьох іспитів без будь-якої спеціальної підготовки чи підкріплення», — пишуть дослідники у своїй опублікованій статті . «Крім того, ChatGPT продемонстрував високий рівень узгодженості та проникливості у своїх поясненнях».
ChatGPT — це тип штучного інтелекту , відомий як велика мовна модель або LLM. Ці LLM спеціально розроблені для письмових відповідей, і за допомогою величезної кількості зразків тексту та деяких розумних алгоритмів вони можуть передбачати, які слова мають йти разом у реченні, подібно до старшого брата функції інтелектуального введення тексту вашого телефону.
Це щось на зразок спрощення, але ви зрозуміли: ChatGPT насправді нічого не «знає», але, аналізуючи величезну кількість онлайн-матеріалів, він може скласти правдоподібні речення майже на будь-яку тему.
Але ключовим є «правдоподібне звучання». Залежно від вірогідності різних фраз, ШІ може здатися неймовірно розумним або прийти до найсмішніших висновків.
Дослідники зі стартапу Ansible Health перевірили його, використовуючи зразки запитань від USMLE, переконавшись, що відповіді не були доступні в Google, тож вони знали, що ChatGPT генеруватиме нові відповіді на основі даних, на яких він навчався.
Під час тестування ChatGPT набрав від 52,4 до 75 відсотків за три іспити (прохідний бал зазвичай становить близько 60 відсотків). У 88,9 відсотках відповідей він дав принаймні одну важливу ідею, описану дослідниками як щось «нове, неочевидне та клінічно дійсне».
«Досягнення прохідного балу для цього сумнозвісно складного експертного іспиту, і це без будь-якої людської підтримки, знаменує помітну віху в клінічному дорослішанні ШІ», — заявили автори дослідження в заяві для преси.
ChatGPT також виявився вражаюче послідовним у своїх відповідях і навіть зміг обґрунтувати кожну відповідь. Він також перевищив 50,3 відсотка точності PubMedGPT, бота, спеціально навченого медичній літературі.
Варто пам’ятати, що інформація, на якій навчався ChatGPT, міститиме неточності: якщо ви запитаєте самого бота , він визнає, що для підвищення надійності LLM потрібно більше працювати. Він не замінить медичних працівників у найближчому майбутньому.
Однак потенціал для аналізу онлайн-знань явно величезний, особливо тому, що ці боти ШІ продовжуватимуть удосконалюватися в наступні роки. Замість того, щоб замінити людей у медичній професії, вони могли б стати їм життєво важливими помічниками.
«Ці результати свідчать про те, що великі мовні моделі можуть мати потенціал для допомоги в медичній освіті та, можливо, у прийнятті клінічних рішень», — пишуть дослідники .
