【CNMO科技动静】近日,中文通用年夜模子评测基准SuperCLUE发布手机助手gui智能体测评6月榜单。成果显示,复兴gui手机智能体以91.29分位列总成就第一,于全数评测维度中均排名首位。CNMO科技留意到,这次测评共涵盖6款手机助手GUI智能体产物,重点面向具有智能体架构和配套模子的产物举行评估。


从总成就来看,排名第2至第6的产物别离为智谱AI Open-AutoGLM,患上分73.11分;阿里巴巴Mobile-Agent-3.5,患上分67.74分;阿里巴巴MAI-U1,患上分65.91分;阶跃星斗GELab-Zero,患上分54.26分;字节跳动UI-TARS,患上分30.19分。根据宣布数据,复兴gui手机智能体于总分上与其他参测产物拉开较年夜差距。

于分项维度方面,复兴gui手机智能体别离于繁杂用意拆解与动态计划、多模态gui感知与理解、跨运用全链路履行等项目中得到第一。上述能力重要对于应手机智能体于现实利用中的要害环节,包括对于用户使命方针的理解、敌手机界面信息的辨认,以和于多个运用之间完成持续操作的履行能力。

按照SuperCLUE宣布的测评申明,年夜模子与端侧AI的联合,正鞭策手机助手从传统语音或者指令型助手,进一步演进为具有gui主动化及繁杂使命计划能力的智能体。为成立相对于同一的量化基准,这次评测于同一ADB手机交互与纯视觉输入情况下举行,并经由过程尺度化使命集与评分系统,对于各种Agent于用意解析、视觉感知及长链路履行使命中的决议计划质量举行权衡。
版权所有,未经许可不患上转载
-今年会官方网站

