Anton Osika 讨论基准测试 saturating 的可视化问题
Lovable 创始人和风投 Judith Dada 在聊基准测试图表怎么画才不误导,还抛出了基准对 ASI 是否还有效的问题。
Lovable 创始人 Anton Osika 在 X 上回应 Judith Dada 关于基准测试 saturating 的讨论。Osika 承认自己此前的可视化受过去 jagged 图表影响,并给出更合适的呈现方式。讨论触及一个核心问题:saturating 是否意味着基准测试只对人类有效,而对 ASI 失去区分度。
On point visualization @DadaJudith But does “saturating” actually mean benchmarks only work well for humans, not ASI ? Judith Dada @DadaJudith @Uzulortft Actually fair criticism, I was primed by past jagged visualisations. Should look more something like this now: 🔗 View Quoted Tweet 💬 0 🔄 0 ❤️ 0 👀 896 ⚡