超越准确率：大语言模型统计推理的多维评估

一项研究提出结合准确率、响应行为、主题建模和词汇相似性的多维评估框架，用于分析大语言模型的统计推理。该框架应用于15款当前大语言模型对90道统计考题的解答，题目覆盖高中、本科和研究生四个考试。模型准确率介于55%到78%之间。结构主题建模显示所有模型在概念组织上高度一致，词汇相似性分析则发现Anthropic、OpenAI等同一厂商的模型解释风格更为接近。