GoogleのAIチャットボットが米国の医師免許試験に合格

Google は 2022 年 12 月に公開された調査でこの新しいチャットボットを初めて公開しましたが、まだ広く適用されていません。 Med-PaLM と呼ばれるチャットボットは、Google の最新かつ最先端の大規模言語モデル (LLM) である PaLM に基づいて開発されています。

Med-PaLM は医療に特化しているため、従来の他のチャットボットよりも質の高い医療回答を提供できると言われています。一部の専門家は、Med-PaLM は「医師や看護師へのアクセスが限られている」国々で非常に役立つだろうと考えています。

ネイチャー誌の研究によると、Med-PaLMは米国医師免許試験（USMLE）の多肢選択式テストで67.6％のスコアを達成し、最低合格率の60％を超えたという。調査の結果、Med-PaLM の医療専門知識は非常に優れているものの、医師ほど優れているわけではないことが判明しました。

Google は、Med-PaLM が USMLE に合格した最初の大規模言語モデル (LLM) であると主張しています。 5月に発表された研究によると、Med-PaLM 2はUSMLEで86.5%のスコアを獲得し、オリジナルのチャットボットよりも高いスコアを獲得したが、その研究は正確性を確認するための査読を受けていない。 Med-PaLMに加え、OpenAIのChatGPTチャットボットもこのテストにほぼ合格できると言われています。

「医学的な質問に答えることと、診断や治療の処方など実際の状況に対処することの間には大きな違いがある」と、英国バース大学のコンピューターサイエンスの専門家、ジェームズ・ダベンポート氏は強調した。

一方、リーズ大学のAI専門家アンソニー・コーン氏は、システムの統計的性質上、LLMベースのモデルではチャットボットが誤った情報を提供する可能性が依然としてかなり大きいと述べた。そのため、彼は、これらのチャットボットは、患者の治療を決定する権利を持つ実際の医師としてではなく、アシスタントとしてのみ使用されるべきだと考えています。