arXiv cs.LG· Ashman Mehra, Bryan Routledge, Jane JaeYeon Pyo, Pierre Jinghong Liang·· 19 天前AI 评分35
FinGREAT：评估大语言模型在金融图引导检索与类型标注上的表现
FinGREAT: Evaluating LLMs on Financial Graph-guided Retrieval And Typing
AI 导读
研究人员提出 FinGREAT，用于评估大语言模型根据复式簿记关系从非结构化财报文本中提取和分类证据的能力。基于包含 11 个节点和 11 条边的金融会计图，研究团队跨 26 年的 1,300 份 SEC 10-K 文件评估了 5 个开源模型家族与 3 个闭源模型，发现模型间抽取量和一致性差异显著。
来源：arXiv cs.LG · arxiv.org