arXiv cs.AI· Yibo Yang, Zerui Huang, Haomiao Yang, Zixia Wang·· 6 天前AI 评分35
MedConstBench：评测宪法如何引导大语言模型的医学伦理表现
MedConstBench: Benchmarking How Constitutions Steer LLMs in Medical Ethics
AI 导读
医学伦理评测基准 MedConstBench 将部署宪法作为受控变量，结合临床困境数据集 MedDilemma 与 Beauchamp 四原则，分析宪法对大语言模型的引导作用。在 4 种宪法下评测 10 个开源 LLM 显示，宪法效果具维度选择性与模型依赖性，不存在通用最优宪法。研究进而提出无害自适应选择器，能为各模型自适应匹配宪法并保障最差底线。
来源：arXiv cs.AI · arxiv.org