Med-PaLM 2: ИИ от Google, который может отвечать на медицинские вопросы, как эксперт

Med-PaLM 2: ИИ от Google, который может отвечать на медицинские вопросы, как эксперт

Google разрабатывает большую языковую модель (LLM), которая может давать качественные ответы на медицинские вопросы. Модель под названием Med-PaLM 2 представляет собой вариант Google PaLM 2, который был анонсирован на Google I/O в мае этого года. Med-PaLM 2 предназначен для использования силы LLM от Google, которые были адаптированы к медицинской сфере и оценивались с использованием медицинских осмотров, медицинских исследований и запросов потребителей.

Я невероятно взволнован последними достижениями в области машинного обучения — возможности кажутся безграничными. Ярким примером, который сейчас у всех на виду, является ChatGPT, который значительно расширил наши возможности. Однако ChatGPT — не единственный новичок. Например, Med-PaLM 2 также стал заметной моделью. Я углублюсь в сущность Med-PaLM 2 и ее основные цели. Уверяю вас, это будет сногсшибательно 😇

Что такое Med-PaLM 2 и что он может делать?

Med-PaLM 2 — это LLM (большая языковая модель), которая может генерировать письменные ответы в ответ на медицинские запросы, обобщать документы и извлекать данные. Модель также может выполнять сложные рассуждения и поиск знаний, чтобы отвечать на вопросы в стиле USMLE, которые используются для оценки компетентности студентов-медиков и врачей. Med-PaLM 2 был первым LLM, который показал результаты на уровне «эксперта» по набору данных MedQA вопросов в стиле USMLE, достигнув точности 85%+. Это также была первая система искусственного интеллекта, получившая проходной балл в наборе данных MedMCQA, включающем индийские вопросы медицинского обследования AIIMS и NEET, набрав 72,3%.

Модель уже проходит испытания в больницах. Med-PaLM 2 также может генерировать развернутые ответы на вопросы потребителей о здоровье, такие как Каковы симптомы COVID-19? или Как мне понизить кровяное давление?. Ответы модели оцениваются группами врачей и пользователей как точные, безопасные и полезные. Например, вот образец ответа, сгенерированный Med-PaLM 2, на вопрос Каковы преимущества медитации?:

Медитация — это практика, которая включает в себя концентрацию вашего внимания на одном объекте, мысли или ощущении, например, на вашем дыхании, мантре или пламени свечи. Медитация может иметь различные преимущества для вашего физического и психического здоровья, например:

Снижение стресса и беспокойства. Медитация может помочь вам успокоить разум и тело, активируя парасимпатическую нервную систему, которая снижает частоту сердечных сокращений, кровяное давление и уровень кортизола. Медитация также может помочь вам справиться с негативными эмоциями и мыслями, увеличивая ваше осознание и принятие их.

Улучшение настроения и самочувствия. Медитация может усилить ваши положительные эмоции и мировоззрение, стимулируя выработку нейротрансмиттеров, таких как серотонин, дофамин и эндорфины. Медитация также может повысить вашу самооценку и сострадание к себе, воспитывая чувство благодарности, доброты и сочувствия.

Повышение ваших когнитивных способностей. Медитация может улучшить вашу память, внимание, концентрацию и творческие способности, укрепляя связи между различными областями мозга и повышая его пластичность. Медитация также может предотвратить или отсрочить ухудшение когнитивных функций, защищая мозг от старения и нейродегенерации.

Повышение иммунитета и физического здоровья. Медитация может поддержать вашу иммунную систему, уменьшая воспаление и окислительный стресс, которые связаны с различными заболеваниями и расстройствами. Медитация также может улучшить качество и продолжительность сна, регулируя циркадный ритм и уровень мелатонина. Кроме того, медитация может принести пользу вашему сердечно-сосудистому здоровью, снизив кровяное давление и уровень холестерина.

Как разрабатывается и оценивается Med-PaLM 2?

Med-PaLM 2 основан на модели Google PaLM 2, которая имеет 1,6 триллиона параметров и была обучена на большом наборе текстов из Интернета. Чтобы адаптировать PaLM 2 к медицинской сфере, исследователи Google точно настроили его на коллекции медицинских текстов из различных источников, таких как рефераты PubMed, статьи Википедии, страницы WebMD, страницы клиники Мэйо, страницы Healthline, страницы NHS, страницы CDC. , страницы ВОЗ, отчеты о клинических испытаниях, медицинские учебники, вопросы и ответы на медицинские экзамены.

Чтобы оценить эффективность Med-PaLM 2 в ответах на медицинские вопросы, исследователи Google использовали два набора данных: MedQA и MedMCQA. MedQA — это набор данных, содержащий более 12 000 вопросов в стиле USMLE из различных источников. MedMCQA — это набор данных, содержащий более 194 000 индийских вопросов медицинского обследования AIIMS и NEET. Оба набора данных имеют формат множественного выбора с пятью вариантами в каждом. Исследователи сравнили точность Med-PaLM 2 с другими LLM, такими как GPT-3 (OpenAI), BERT (Google), BioBERT (KAIST), PubMedBERT (Microsoft), ClinicalBERT (Stanford), BlueBERT (NIH), ALBERT (Google), DeBERTa (Microsoft), Turing-NLG (Microsoft), Meena (Google), BlenderBot (Facebook), DialoGPT (Microsoft), ReCoSa (Университет Цинхуа) и т. д.

Чтобы оценить эффективность Med-PaLM 2 при ответах на вопросы потребителей о здоровье, исследователи Google использовали набор данных из более чем 10 000 вопросов из различных источников, таких как Google Search, HealthTap, WebMD, Mayo Clinic и т. д. Исследователи подготовили развернутые ответы на каждый вопрос. с использованием Med-PaLM 2 и других LLM. Затем ответы были оценены группами врачей и пользователей по четырем критериям: точность, безопасность, полезность и удобочитаемость.

Как используется и тестируется Med-PaLM 2?

Med-PaLM 2 в настоящее время тестируется избранной группой клиентов Google Cloud, таких как Mayo Clinic, Cleveland Clinic, Stanford Medicine и т. д. осмысленные способы использования этой технологии. Некоторые из возможных вариантов использования включают в себя:

• Содействие насыщенным и информативным обсуждениям между пациентами и поставщиками медицинских услуг путем предоставления актуальной и надежной информации.
• Ответы на сложные медицинские вопросы и поиск информации в сложных и неструктурированных медицинских текстах для исследователей, преподавателей, студентов и т. д.
• Помощь в составлении кратких и развернутых ответов, а также обобщение документации и выводов из внутренних наборов данных и сводов научных знаний для медицинских работников, администраторов и т. д.

Каковы проблемы и ограничения Med-PaLM 2?

Med-PaLM 2 — выдающееся достижение в области медицинского ИИ, но оно не лишено проблем и ограничений. Вот некоторые из проблем, которые решает Google:

• Обеспечение безопасности и качества результатов модели, особенно в критически важной для безопасности области здравоохранения. Google использует различные методы для мониторинга и снижения рисков неточных, вредных или необъективных выходных данных, таких как оценка с участием человека, карты моделей, таблицы данных и т. д.
• Поддержание актуальности и актуальности базы знаний модели, поскольку медицинская информация постоянно развивается и расширяется. Google регулярно обновляет данные обучения модели и учитывает отзывы экспертов и пользователей.
• Соблюдение конфиденциальности и безопасности данных и запросов пользователей, поскольку медицинская информация является конфиденциальной и личной. Google следует строгим политикам и стандартам для защиты данных и запросов пользователей от несанкционированного доступа или неправомерного использования.
• Установление достоверности и прозрачности результатов модели, поскольку медицинская информация сложна и многогранна. Google предоставляет четкие объяснения и источники для результатов модели и призывает пользователей проверять их с помощью авторитетных источников.

Подведение итогов

Изучив Med-PaLM 2, я был действительно впечатлен его способностью отвечать на медицинские вопросы, как если бы он был экспертом. Создан на платформе Google PaLM 2 и использует огромную коллекцию медицинских книг и статей. Он прекрасно отвечает как на вопросы о медицинском осмотре, так и на повседневные проблемы со здоровьем. Однако, как и у любой новой технологии, у Med-PaLM 2 есть свои недостатки. Убедиться, что информация является первоклассной и актуальной, а также безопасной, конфиденциальной и понятной — большая задача. Мне любопытно посмотреть, как Google с помощью таких специалистов и обычных пользователей, как я, скоро решит эти проблемы.

Веб-сайты