OpenAlex · Aktualisierung stündlich · Letzte Aktualisierung: 17.03.2026, 01:14

Dies ist eine Übersichtsseite mit Metadaten zu dieser wissenschaftlichen Arbeit. Der vollständige Artikel ist beim Verlag verfügbar.

Performance of Publicly Available Large Language Models on Internal Medicine Board-style Questions

2023·0 ZitationenOpen Access
Volltext beim Verlag öffnen

0

Zitationen

6

Autoren

2023

Jahr

Abstract

<title>Abstract</title> We investigate the performance of four large language models (LLMs) on internal medicine board-style examination questions from the Medical Knowledge Self-Assessment Program released by the American College of Physicians. GPT4 outperformed GPT3.5, human users, LaMDA and LLaMA 2 in that order. A drop in GPT4 performance when accessing its API versus its publicly available chatbot (ChatGPT) was recovered through fine tuning in the form of Harrison’s Principles of Internal Medicine.

Ähnliche Arbeiten