精选理由
研究团队做了一个GUI探索器,自动找出那些需要你亲自操作的敏感界面,比直接让AI乱点安全多了。
该论文提出一个GUI探索器agent,从示范任务出发系统探索查询空间,识别会导致用户敏感状态的GUI操作。现有LLM agent通常被微调为不管安全影响都完成任务,难以部署。论文定义了用户敏感状态和查询的分类,帮助工程人员在关键场景下识别并请求用户接管。实验在开放GUI环境中验证了方法的有效性。
AI 翻译 · 中文
该论文提出一个GUI探索器agent,从示范任务出发系统探索查询空间,识别会导致用户敏感状态的GUI操作。现有LLM agent通常被微调为不管安全影响都完成任务,难以部署。论文定义了用户敏感状态和查询的分类,帮助工程人员在关键场景下识别并请求用户接管。实验在开放GUI环境中验证了方法的有效性。
LLM agents are increasingly being used to automate tasks for users within an open GUI environment. They inevitably encounter screens containing user-sensitive information, for which takeover of task execution by the user…