Models

V4.1-Flash 去审查版基准变化:抽象代数退步、大学数学提升

Why we picked it

有人把 V4.1-Flash 去审查后跑分,结果挺有意思:抽象代数掉分,大学数学反而涨了,可以看看具体数字。

一位用户对 V4.1-Flash 做了 abliteration(去对齐/去审查)处理,得到所谓 immoral 版本。该版本在 abstract algebra(抽象代数)基准上明显退步。同一版本在 college mathematics(大学数学)上成绩显著提升。这条推文以此对比去审查对模型不同领域能力的影响。

Original · Teortaxes

This says a lot about society… I'm not sure what though. Abliterated, immoral V4.1-Flash severely regresses on "abstract algebra" but gains bigly on "college mathematics". https://t.co/mRkgK3wC7J