11:08官方账号arXiv cs.AI@Ziyu Chen, Yilun Zhao, Arman Cohan这篇论文构建了一个大规模评估框架,从高质量人类研究论文中逆向工程出可能激发核心想法的少量相关先前工作。通过提示LLM从论文标题和摘要生成新想法,作者引入双轴研究品味分类法(机会模式和研究范式)来量化人类与LLM想法之间的差异。在多个LLM生成的想法集中,观察到一致的分布差距:LLM想法过度集中在桥接式机会和综合方法上,而人类论文参考分布更广泛地分布在构建差距和贡献的方式上。结果表明,即使强大的LLM能产生合理想法,其范围仍比人类研究品味窄且系统性偏移。论文LLM研究想法论文人类差距推荐理由:这篇论文用一套严谨的方法测出了LLM和人类科研人员在脑洞上的真实差距,发现LLM的想法集中但套路化,和人比还是有明显偏差。原文