炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会!
(来源:快科技)
快科技8月21日消息,SuperCLUE公布AgentCLUE Mobile手机GUI Agent基准测评榜单。
这是专门测试手机端AI智能体干活能力的评测,vivo蓝心小V第一次参与测评,直接拿到总榜第一名,总成绩92.11分,拉开不小的分数差距。
这次参评一共有6款产品,全部是市面上主流手机GUI智能体。第二名是智谱AI的Open AutoGLM,得分76.75分。
第三名来自阿里巴巴Mobile Agent 3.5,拿到73.45 分。第四名同样是阿里的MAI UI,第五名为阶跃星辰GELab Zero,字节跳动UI TARS排在第六。
测评分成三个核心维度打分,分别是复杂意图拆解与动态规划、多模态GUI感知与理解、跨应用全链路执行。
蓝心小V三项全部排在第一,复杂意图拆解拿到94.41分,多模态GUI感知91.69分,跨应用全链路执行89.12分。
简单说,不管是理解复杂指令、看懂手机界面,还是跨多个APP连续完成任务,它的表现都处于领先水平。
调用方式上,蓝心小V、Open AutoGLM、Mobile Agent 3.5采用API调用,剩下三款产品为本地部署模式。API调用可以拿到云端大模型更强能力,本地部署的优势是不用联网,数据留在本机,两种方案各有取舍。
GUI Agent就是手机上的AI助手,你直接说需求,它自动识别屏幕界面,点按钮、切换软件,跨APP完成一整套操作,不用我们手动一步步点。比如让它帮你搜电影、订外卖、整理日程,交给智能体自动跑流程。
当然现在手机GUI智能体还没做到完美,遇到界面改动、特殊弹窗,依旧会出现执行失败。这次测评也能看出来,各家的能力差距很大,第一名和最后一名分数差距超过60分。
vivo蓝心小V首次参评就登顶,说明手机端端云协同的GUI智能体方案已经取得不错效果。