MedMCQA
https://scrapbox.io/files/6650295ff2b8d4001d52eab7.png
大規模な多肢選択問題回答(Multiple-Choice Question Answering: MCQA)データセット
実世界の医学部入試問題に対応するように設計されている。
AIIMSとNEET-PGという、インドの2つの医科大学入学試験のスタイルの、模擬試験と過去の試験問題を提供している
MedMCQAには、2.4kのヘルスケアトピックと21の医学科目をカバーする194k以上の高品質なAIIMS & NEET PG入試MCQが、平均トークン長12.77と高いトピック多様性で収集されている。
各サンプルには、問題、正解、その他の選択肢が含まれており、医療科目やトピックの広い範囲にわたってモデルの10以上の推論能力をテストするため、より深い言語理解を必要とする。