10 ноября 2026, вторник30 Хешвана 5787 — конвертер дат
Логотип STMEGISTMEGI TVSTMEGI Junior
Наука 3 мин чтения 6,7 тыс. просмотров

Можно ли верить медицинской информации в ChatGPT, выяснили ученые Израиля

СРедакция СТМЭГИ
Можно ли верить медицинской информации в ChatGPT, выяснили ученые Израиля
shutterstock

Использование искусственного интеллекта (ИИ), особенно больших языковых моделей вроде ChatGPT, набирает обороты. Вместе с тем остается важный вопрос: насколько можно полагаться на них в понимании сложной медицинской информации? Не навредят ли советы «доктора с искусственным интеллектом»? Ответ на эти вопросы дает новое исследование, проведенное в Израиле и опубликованное в научном журнале Computers In Biology and Medicine.

Исследование проводилось учеными университета имени Бен-Гуриона в Негеве. Оно проверяло возможность моделей ИИ давать точные ответы на медицинские вопросы. Проверялась способность ChatGPT и его аналогов правильно понимать язык медицины. Результаты удивили ученых.

Сейчас медицинский чатбот отвечает на вопросы пациентов, предсказывая развитие болезней, создает сводные данные о больном и готовит вопросы и ответы для студентов-медиков. Но поскольку модели ИИ в области медицины стали распространенными, возникают вопросы критической важности: может ли ИИ разбираться в тонких различиях между близкими по смыслу медицинскими терминами? Особенно если речь идет о медицинских кодах, которые необходимо точно понимать на высоком уровне. Для проверки ученые сравнили разные моделей ИИ, в том числе те, что специализируются в области медицины.

Для сравнения была создана целевая система оценки - MedConceptsQA, содержащая 800.000 вопросов и ответов трех степеней сложности, относящихся к применяемым во всем мире медицинским понятиям. Была поставлена задача выяснить, как модели ИИ интерпретируют эти понятия и различают их. Понятия относились к сфере диагностики, лечебных процедур и медикаментов. При помощи разработанного алгоритма были автоматически созданы вопросы с переменным уровнем сложности, для ответа требовалось выбрать правильный медицинский код. Если простые вопросы требовали наличия базовых знаний, то для ответа на сложные нужно было глубокое понимание и умение находить даже небольшие различия между схожими медицинскими понятиями. Вопросы средней сложности требовали более высокого уровня базовых знаний.

Исследование показало, что большинство моделей ИИ дает плохие результаты, основанные на случайных догадках. Это относилось и к моделям ИИ, разработанным специально для использования в медицине и содержавшим большие объемы медицинской информации. А вот ChatGPT4 показал лучшие результаты, его точность была в среднем равна 60%, но и это далеко от удовлетворительного уровня.

К удивлению ученых, модели не медицинского, а общего назначения, такие как ChatGPT4 и Llama3-70B, выдавали лучшие результаты. Отсюда можно сделать вывод: модели ИИ, занятые расшифровкой словесных текстов, эффективны в классификации информации, но когда речь идет о жизненно важной клинической информации, необходимо глубокое понимание сути медицинских кодов и их различий. Это понимание имеет критическое значение в ранней диагностике и в спасении жизни.

Исследование позволило оценить способность чатботов к интерпретации медицинских кодов и различению медицинских терминов. Доказано, что большинство медицинских моделей ИИ выдает ответы, соответствующие случайному угадыванию человеком, зато ChatGPT3.5, ChatGPT4 и Llama3-70B превосходят их, хотя их кодировка не имеет отношения к медицине.

Клинические данные в большинстве своем включают стандартные медицинские коды и тексты на естественном языке. Израильское исследование подчеркивает необходимость более обширного клинического языка для понимания медицинской информации и осторожность, необходимую при их широком использовании. Результаты этого исследования имеют практическое значение для современного медицинского мира. Удивительные результаты исследования поднимают серьезные вопросы, которые волнуют многих ученых: следует ли использовать медицинские модели ИИ для составления прогнозов, требующих клинического понимания медицинских кодов.

vesty.co.il

Следующая статья· Наука
Наука 5 мин чтения 4,8 тыс. просмотров

Как правнук Ирода в римском стиле на Голанах развлекался

Территория перед пещерой традиционно считалась Августеумом царя Ирода — храмом, посвященным имперскому могуществу Рима

Илья АмигудИлья Амигудкандидат физико-математических наук, блогер
Как правнук Ирода в римском стиле на Голанах развлекался
Вид на пещеру Банеас, связанную с поклонением Пану · Doron Gahali/courtesy

Последние раскопки в Баниасе, израильском археологическом памятнике и национальном парке на Голанских высотах, граничащем с Ливаном, показали, что сакральная пещера, издавна связанная с поклонением божеству природы Пану, вероятно, была переоборудована в конце I века н. э. Агриппой II, правнуком царя Ирода, под зал для мероприятий в римском стиле.

После еврейского восстания против римского владычества (66-73 н.э.) Агриппа II, который вырос в Риме и поддержал римлян во время восстания, превратил пещеру и ближайшие окрестности перед гротом в нимфеум-триклиниум, место для проведения банкетов в римском стиле, где вода текла вокруг центральной обеденной зоны и вытекала через акведук, как утверждают доктор Ади Эрлих и исследователь Рон Лави из Института археологии им. Цинмана Хайфского университета.

Находка является «настоящим открытием», которое «многое меняет в истории Баниаса», а также подкрепляет рассказы Иосифа Флавия, жившего во времена Агриппы II, сказал Лави The Times of Israel.

Как правнук Ирода в римском стиле на Голанах развлекался

Вид на пещеру Баниас, где видны следы недавних раскопок

«Многие склонны считать все, что говорит Иосиф, преувеличениями, но я думаю, что где бы вы ни копали и ни сравнивали, с историческими описаниями, обычно он прав», — сказал он. Иосиф писал о пещере в Баниасе, полной воды, и «теперь мы можем подтвердить это, обнаружив акведук, который был построен для отвода воды из пещеры».

Эрлих и Лави опубликовали результаты своего исследования под названием Dine and Worship: The Roman Complex in Front of the Pan Grotto in Paneas/Caesarea Philippi («Трапеза и молитва: Римский комплекс перед гротом Пана в Панеасе/Кесарии Филипповой») в ноябре в рецензируемом журнале Bulletin of the American Society of Overseas Research (University of Chicago Press).

Банкетная зона была обнаружена во время «волшебных» сезонов раскопок в 2020 и 2021 годах, когда на месте пещеры не было туристов из-за пандемии COVID, после того как обычная консервация, направленная на укрепление стены, «вызвала несколько вопросов», объяснил Лави.

Территория перед пещерой традиционно считалась Августеумом царя Ирода — храмом, посвященным имперскому могуществу Рима, построенным Иродом, который должен был перекрывать пещеру.

Однако, как пишут исследователи, «новые раскопки доказали, что в римский период это место не имело крыши и открыто для пещеры, которая была полна воды. Вода вытекала через большой акведук, во внутреннем дворе были построены водопроводные сооружения, а на западе и востоке — ниши».

Пещера «вероятно, изначально была культовым, открытым пространством. Но мы считаем, что Агриппа II в последней трети I века превратил это место в свой личный триклиний, столовую с водой. Пещера была полна воды, а также вся площадь перед ней», — объясняет Эрлих.

Как правнук Ирода в римском стиле на Голанах развлекался

Пещера Баниас, заполненная дождевой водой

«В самом Риме первого века это было очень распространено. Вы обедаете на открытом воздухе, а перед вами источник воды, фонтан или любое другое водное сооружение, — сказал Эрлих. — Это сочетается с красивыми видами, звуками воды и запахами еды. Таким образом, все органы чувств работают в унисон».

В Баниасе должен был быть еще один компонент: грот пещеры, превращающий ее в нимфеум-триклиний. «Пещера действительно была полна воды. В центре находилась огромная скала, которая была фокусной точкой всего комплекса. Вероятно, на этой скале стоял алтарь или статуя», — говорит Эрлих.

«Весь комплекс был построен по симметричному плану, обращенному к этой скале. Акведук регулировал уровень воды так, чтобы эта скала всегда была видна», — добавила она, отметив, что на некоторых древних монетах, найденных неподалеку, в самой Кесарии Филипповой, изображена статуя Пана или связанная с ним фигура, стоящая в пещере.

Как правнук Ирода в римском стиле на Голанах развлекался

Фрагмент недавних раскопок в пещере Баниас

По словам исследователей, банкетный комплекс нимфеум-триклиний в римском стиле, обнаруженный в Баниасе, — единственный в своем роде, обнаруженный на территории Израиля.

В то время пещеру питал природный источник, и она должна была быть постоянно полна воды, но, скорее всего, позднее землетрясение сместило водный поток в этом районе, так как сейчас пещера лишь изредка наполняется водой от стоков после сильных дождей, говорят исследователи.

В I веке район пещеры Баниас был частью римского города Кесария Филиппова, который позднее упоминается в Евангелиях от Марка и Матфея как место, где святой Петр признал божественность Иисуса. Ранее на месте пещеры была обнаружена церковь, датируемая V веком, а в наши дни эта местность стала местом христианского паломничества.

Название «Баниас», также известное с эллинистического периода как Панеас, восходит к имени Пан, что указывает на то, что пещерное место издавна было связано с поклонением козлоногому, играющему на флейте божеству природы, культ которого, рассеянный по восточному Средиземноморью, в основном практиковался в диких, нетронутых местах, включая естественные пещеры и гроты.

Как правнук Ирода в римском стиле на Голанах развлекался

Вид изнутри пиршественного комплекса в Сперлонге, Италия

Согласно Иосифу Флавию, после разрушения Второго храма в 70 году н. э. Титом и его легионами, римский полководец «отправился в Баниас, и Агриппа устроил для него игры, на которых казнили заключенных». Это произошло в Кесарии Филипповой, вероятно, в 70 году н. э., может быть, годом позже», — говорит Эрлих.

Агриппа II бежал из Иерусалима в 66 году н. э., несколькими годами ранее, когда началось иудейское восстание, и, вероятно, именно тогда он переоборудовал это место».

Как правнук Ирода в римском стиле на Голанах развлекался

Часть природного заповедника Баниас, пострадавшая от огня, вызванного ракетами «Хезболлы», 8 августа 2024 г.

В бетонном полу комплекса было найдено несколько монет, самая поздняя из которых датируется 69 годом н. э., «поэтому мы говорим о последней трети I века и уточняем датировку строительства всего комплекса. Кроме того, мы лучше понимаем управление водными ресурсами в этом месте», — говорит Эрлих.

По ее словам, пещера Панеас как нимфей-триклиний имеет поразительное сходство с аналогичными объектами в Италии, особенно в Сперлонге, расположенной на побережье между Римом и Неаполем. Там большой нимфей-триклиний, построенный как часть императорской виллы, также имел заполненный водой грот с центральным каменным алтарем, который вел к обеденной зоне, окруженной водой.