FORMA框架:保留认知结构的临床案例生成与验证
原始标题 / Generating Clinical Vignettes that Preserve Cognitive Formulations
该研究提出FORMA框架,通过认知模型编译成图结构来生成临床案例,确保生成文本保留诊断相关的认知成分与因果关系。与直接使用大语言模型零样本生成相比,FORMA生成的案例在结构保真度、专家评估和临床医生感知真实性上显著更优,同时减少人口统计学差异。该研究为可审计的合成临床文本生成提供了新方法。
01 摘要
该研究开发了FORMA框架,利用PTSD的认知模型生成符合特定认知结构的临床案例。在500个虚拟人物、11个生成模型和3种消融条件下生成了16,500个案例,并通过外部边恢复探针、临床专家评估、LLM评判和100名执业医生的用户研究进行验证。结果显示全条件生成的案例可恢复认知图(MCC=0.41,AUC=0.70),而零样本生成仅接近随机(MCC=0.01,AUC=0.50)。专家评分和临床医生感知真实性均显著高于零样本,且减少了感知质量的群体差异。作者认为认知公式可作为可审计的规范,用于大规模合成临床文本。
02 关键点
- 提出FORMA框架,基于认知模型生成临床案例,确保结构保真。
- 在PTSD案例中,全条件生成的认知图可恢复性显著高于零样本(MCC 0.41 vs. 0.01)。
- 专家评分和临床医生感知真实性显著优于零样本。
- 全条件生成的案例被85%的临床医生误认为人类撰写,零样本仅为22%。
- FORMA将感知质量的人口统计学差异减少了1.5至7倍。
回到一手来源
阅读原文 ↗AI GENERATED SUMMARY / DISCOVERED BY ARXIV CS.CL