网易首页 > 网易号 > 正文 申请入驻

阿里开源了"会自己操作电脑的 AI",但这事没你想的那么简单

0
分享至

8 月 20 号阿里开源了个叫 Qwen-UI-Agent 的东西,技术圈一下子炸了。我看了技术报告和跑分数据——好消息和坏消息都有,别被"白送"两个字冲昏头。

简单说:它是一个GUI 智能体基座模型——不是只会聊天的模型,是能自己点屏幕的那种。一个模型,同时管手机、电脑、网页、还有深度搜索(DeepSearch)四块环境。

现在市面上绝大多数"电脑/手机自动操作"的 Agent,都是在模拟器里练出来的。模拟器多干净啊,界面固定、环境可控。但一上真机就露馅——真机 App 弹窗、广告、网络抖一下,它就傻了。

阿里这回不一样:搭了 100+ 台真手机、150+ 个真实 App 的环境去训练和评测。结果很说明问题——

模拟器榜单 MobileWorld:82.1%

真机榜单 MobileWorld-Real:92.2%

真机上反而比模拟器高,说明它不是"背答案",是真学会了操作逻辑。AndroidDaily 更是跑到 97.5%,接近满分。



WebArena 73.6%,所有对比模型里第一

OSWorld-Verified 79.5%(电脑端)

ScreenSpot-Pro 81.5%(界面定位)

模型还能把 GUI 点击和命令行(CLI)混着用,单次决策批量输出动作(约 40% 是批处理),比一步一步点快得多

以前"让 AI 替你操作电脑"这种能力,大厂基本是关起门来卖 API 的——你想用,得按调用量交钱。

阿里这回把权重放出来了:旗舰 27B,最小可以压到 2B 端侧跑(GitHub:Tongyi-MAI/MAI-UI)。这意味着什么?意味着做 RPA、做自动化小工具的人,门槛一下子塌了——不用再被一家 API 绑死,自己部署、自己改。

自动操作最怕"它自作主张"。Qwen-UI-Agent 设计了安全刹车:违法/高风险的请求直接拒;遇到付钱、删数据、隐私授权这种敏感操作,会停在关键步骤等你确认再继续。这一点不是噱头,是这种 Agent 能不能让人放心用的底线。

你现在直接用不上原模型。但它开源之后,很快会冒出一堆"帮你整理手机文件""替你在网页上比价""自动填表"的小工具——底层可能就是它。

一句话:阿里把"会操作界面的 AI"从黑盒 API 变成了开源权重,方向是对的,但离"替你全自动操作电脑"还差得远——别急着扔掉你的鼠标。

你觉得这种"会自己点屏幕的 AI",最先会在哪个场景落地?评论区聊聊。

#Qwen# #行业观察# #观点# #实时资讯# #AI工具#

*声明:本文配图由 AI 生成,仅供示意参考;内容为本人实测观点,转载请注明出处。*

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
女主播和榜一大哥线下见面一般会干啥?网友:直播间二级宅男的终极幻想

女主播和榜一大哥线下见面一般会干啥?网友:直播间二级宅男的终极幻想

带你感受人间冷暖
2026-09-14 00:16:44
理记为西贝强出头,狂轰罗永浩,爆出各种猛料~

理记为西贝强出头,狂轰罗永浩,爆出各种猛料~

葱哥说
2026-09-20 17:19:50
又一款新机官宣:9月22日,正式首发亮相!

又一款新机官宣:9月22日,正式首发亮相!

科技堡垒
2026-09-20 11:47:32
陈冠希吴彦祖余文乐皆显老,唯有46岁的他,状态宛如26岁少年

陈冠希吴彦祖余文乐皆显老,唯有46岁的他,状态宛如26岁少年

老娱记啊
2026-09-19 14:55:02
人口出生率飞速下降,最多6年,各种问题就会出来,内卷更严峻

人口出生率飞速下降,最多6年,各种问题就会出来,内卷更严峻

夏末的晨溪
2026-09-21 00:16:52
34岁萨拉赫获评10分+加冕MVP:独造4球,率队4-0完胜土超领头羊,领跑土超射手榜,太牛了

34岁萨拉赫获评10分+加冕MVP:独造4球,率队4-0完胜土超领头羊,领跑土超射手榜,太牛了

侧身凌空斩
2026-09-20 02:58:16
重演银河号事件?美军枪已上膛要强登中国船,却发现犯下致命错误

重演银河号事件?美军枪已上膛要强登中国船,却发现犯下致命错误

南宗历史
2026-09-20 03:17:37
伊朗副总统:当初选择日本车就好了,中国车质量差价格高

伊朗副总统:当初选择日本车就好了,中国车质量差价格高

贱议你读史
2026-09-02 21:21:39
李嘉诚再次精准预判!如果不出意外的话,未来3年,楼市或迎来3大走向!

李嘉诚再次精准预判!如果不出意外的话,未来3年,楼市或迎来3大走向!

巢客HOME
2026-09-18 06:00:09
开场6分钟主帅染黄,飞铲贝林厄姆仅吃黄牌,皇马替补席怒了

开场6分钟主帅染黄,飞铲贝林厄姆仅吃黄牌,皇马替补席怒了

坠入温柔晚风
2026-09-21 00:23:26
乌克兰大选停办,俄罗斯却如期投票!克宫放出狠话,西方陷入被动

乌克兰大选停办,俄罗斯却如期投票!克宫放出狠话,西方陷入被动

无情有思可
2026-09-21 01:08:17
罗嘉良重回TVB:离开便显沧桑,一归剧组便是金融大佬

罗嘉良重回TVB:离开便显沧桑,一归剧组便是金融大佬

娱你同欢
2026-09-19 21:23:55
没吴曦 这个家得散!中国队打分:毛伟杰杨希高分,一将4.0分!三将刚及格

没吴曦 这个家得散!中国队打分:毛伟杰杨希高分,一将4.0分!三将刚及格

刀锋体育
2026-09-20 16:46:03
炸裂!日本妻子拍AV挽救婚姻,瞒夫出道老公崩溃,如今丈夫成粉丝

炸裂!日本妻子拍AV挽救婚姻,瞒夫出道老公崩溃,如今丈夫成粉丝

悠悠说世界
2026-08-17 13:48:27
47M没抢到,如今要60M:利物浦已接触这位22岁中场

47M没抢到,如今要60M:利物浦已接触这位22岁中场

赛场速报局
2026-09-21 01:27:41
哪些东西你认为已经贵到不值了?网友:看了物价,我认为减肥辟谷是普通人攒钱的最佳方法

哪些东西你认为已经贵到不值了?网友:看了物价,我认为减肥辟谷是普通人攒钱的最佳方法

带你感受人间冷暖
2026-09-14 10:27:48
副班长富勒姆战平曼联,热刺在英超积分榜落到垫底位置

副班长富勒姆战平曼联,热刺在英超积分榜落到垫底位置

懂球帝
2026-09-21 01:28:53
iPhone 18 Pro Max首摔来了,看完我有点心痛

iPhone 18 Pro Max首摔来了,看完我有点心痛

搞机小帝
2026-09-19 02:41:28
哈兰德打破黑猫魔咒!通杀英超25队,进球失而复得,领跑射手榜

哈兰德打破黑猫魔咒!通杀英超25队,进球失而复得,领跑射手榜

奥拜尔
2026-09-20 23:05:44
特朗普回应:我儿子已把钱退还俄罗斯富商了;此前美媒爆料称其资助特朗普长子婚礼,并与俄政府关系密切,曾获普京授勋、被乌克兰制裁

特朗普回应:我儿子已把钱退还俄罗斯富商了;此前美媒爆料称其资助特朗普长子婚礼,并与俄政府关系密切,曾获普京授勋、被乌克兰制裁

鲁中晨报
2026-09-19 17:27:11
2026-09-21 01:55:00
一芯玩AI
一芯玩AI
专测普通人用得上的 AI 工具。不吹不割,只晒亲测效果和踩坑,把能直接抄的操作讲明白
15文章数 0关注度
往期回顾 全部

科技要闻

谷歌承认:AI模型“黑”进3家公司

头条要闻

男子网购燃气灶防风罩一个月后妻儿中毒死亡 多方回应

头条要闻

男子网购燃气灶防风罩一个月后妻儿中毒死亡 多方回应

体育要闻

游泳2小时6金!亚运金牌榜:中国11金领跑

娱乐要闻

许嵩刚官宣结婚,冯禧黑历史就被扒

财经要闻

民企土地 被政府"无偿收储"后转手卖7亿

汽车要闻

预售价42.99万起 岚图梦想家9将于9月22日上市

态度原创

艺术
家居
游戏
本地
时尚

艺术要闻

二十四位大师绝美国画,一眼养眼,再看净心,看完整个世界都安静了!

家居要闻

2026建博会(广州) 公装联探展交流活动

《暗黑4》资料片到此为止!背后原因暴雪首次说透

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

提灯游园,举杯入席 | 这个中秋,来点不一样的!

无障碍浏览 进入关怀版