清华大学与腾讯混元用免费截图训练顶级GUI代理GUICrafter

Tsinghua University Trains a Top-Tier Computer Control Agent Using Massive Free Screenshots

精选理由

清华和混元搞了个新招:用零成本的网页截图训练GUI代理GUICrafter,性能不输大模型,成本只要别人的千分之一。

AI 摘要

清华大学与腾讯混元联合推出GUICrafter,一种利用零成本网络截图和元任务训练的GUI代理。GUICrafter仅需0.1%的训练数据成本,即可在多个基准上达到与顶级模型相当的性能。该方法在WindowsAgentArena等测试中表现突出,证明大规模免费数据可有效训练高质量计算机控制代理。

AI 翻译 · 中文

清华大学与腾讯混元联合推出GUICrafter,一种利用零成本网络截图和元任务训练的GUI代理。GUICrafter仅需0.1%的训练数据成本,即可在多个基准上达到与顶级模型相当的性能。该方法在WindowsAgentArena等测试中表现突出,证明大规模免费数据可有效训练高质量计算机控制代理。

PandailyTsinghua and Tencent Hunyuan’s GUICrafter trains GUI agents with zero-cost web screenshots and meta-tasks, rivaling top models at 0.1% of the training data cost