11月25日消息,据媒体报道,近日新加坡国立大学团队,在20多个场景下对Claude的电脑操控能力进行了全面测试。
结果显示,AI不仅能自动完成手游日常任务,还能执行复杂的办公任务。
研究中选用了米哈游《崩坏:星穹铁道》,可以跟它说”帮我完成今天的模拟宇宙”,Claude就能自动完成各种任务,甚至包括启动自动战斗和等待战斗结束后退出,操作行云流水。
特别值得一提的是,这并不是传统游戏外挂那样的机械操作,Claude还能智能理解游戏规则和目标,根据界面上不同的任务进行调整。
除(chu)了(le)崩(beng)坏(huai)星(xing)穹(qiong)铁(tie)道(dao)A(A)I(I)还(hai)能(neng)自(zi)动(dong)玩(wan)炉(lu)石(shi)传(chuan)说(shuo)包(bao)括(kuo)创(chuang)建(jian)和(he)重(zhong)命(ming)名(ming)牌(pai)组(zu)使(shi)用(yong)英(ying)雄(xiong)技(ji)能(neng)等(deng)
团队基于Claude Computer Use的API设计了一个自动化GUI框架,该框架包括系统提示、状态观察、推理范式等六个部分。
AI通过这个框架能够执行网页搜索、工作流程模型、办公生产力软件等日常办公场景下的任务。
例(li)如(ru)在(zai)A(A)m(m)a(a)z(z)o(o)n(n)和(he)A(A)p(p)p(p)l(l)e(e)官(guan)方(fang)网(wang)站(zhan)上(shang)成(cheng)功(gong)完(wan)成(cheng)下(xia)单(dan)购(gou)物(wu)的(de)任(ren)务(wu)选(xuan)择(ze)颜(yan)色(se)配(pei)置(zhi)填(tian)写(xie)地(di)址(zhi)等(deng)操(cao)作(zuo)“好了,收功” 随着一声大喝,所有孩子都一阵欢呼,揉了揉酸疼的手脚,而后一哄而散,冲向各自的家中,准备吃早饭。
虽然AI在复杂网页操作和办公软件中有部分任务失败,但整体表现已相当出色,团队还公开了所有测试用例的具体信息,供有兴趣的研究者和开发者进一步探索。
声明:该文观点仅代表作者本人,搜狐号系信息发布平台,搜狐仅提供信息存储空间服务。