Liquid AI开源Antidoom:用FTPO减少推理模型Doom Loops

Liquid AI Open-Sources Antidoom: A Final Token Preference Optimization (FTPO) Method that Reduces Doom Loops in Reasoning Models

精选理由

推理模型老卡死?Liquid AI开源了Antidoom,用FTPO把循环率从22.9%打到1%,直接干掉死循环。

AI 摘要

Liquid AI开源了Antidoom方法,通过Final Token Preference Optimization(FTPO)技术定位并重训推理模型中导致循环的起始token。在LFM2.5-2.6B模型上,doom-loop率从10.2%降至1.4%;在Qwen3.5-4B上,从22.9%降至1%。所有代码包括生成、检测和训练器都已开源。

图片来源 · marktechpost
AI 翻译 · 中文

Liquid AI开源了Antidoom方法,通过Final Token Preference Optimization(FTPO)技术定位并重训推理模型中导致循环的起始token。在LFM2.5-2.6B模型上,doom-loop率从10.2%降至1.4%;在Qwen3.5-4B上,从22.9%降至1%。所有代码包括生成、检测和训练器都已开源。

marktechpostLiquid AI released Antidoom, an open-source method that targets doom loops in reasoning models. A doom loop repeats a span until the context window is exhausted. Antidoom finds the token that starts the loop and retrains