网易首页 > 网易号 > 正文 申请入驻

物理世界正全面觉醒:硬件行业的“Agent时代”来了!

0
分享至


“让任意IoT设备成为智能体?!”

这听起来像是一句产品经理吹牛的黑话,但在今天的硬件开发圈,它正在变成干掉无数加班夜的现实。

长期以来,智能家居和工业硬件都被嘲笑为“伪智能”,改个功能调动五个团队,换个设备代码全部重写。

AI 浪潮拍打了一年多,物理世界却依然像个局外人。

如果你也厌倦了为了一个对话界面去重构整条代码链,那么这场关于硬件静默转变的工程革命,你绝对不能错过。

今天,我们做了一个不同的选择:

Device Agent 是一个 MQTT 驱动的 AI 设备智能体平台。你用自然语言描述设备的能力,平台在几分钟内生成完整的设备智能体——包含设备规格、端侧 SDK、在线模拟器,以及语音、视觉、IM 等多通道交互入口。

它不是连接层之上的一个 AI 对话界面,而是一条从设备建模到多智能体协作的完整工具链。


本文将系统介绍 Device Agent 的设计理念、核心能力与技术架构,阐释如何通过自然语言驱动的设备建模、多模态交互、技能扩展与去中心化协作能力,将每一台物理设备快速转化为具备理解、决策与协同能力的 AI 智能体。

用自然语言描述设备

创建一台设备的 AI 智能体,起点不是写代码,而是写一段话。描述你的设备是什么、能执行什么命令、会上报什么状态、会产生什么事件。系统自动生成结构化的设备规格——命令、属性、事件,以及每个字段的类型和约束。

如果生成的规格不符合预期,在对话中继续沟通就好。左侧对话修订,右侧实时预览。描述、预览、修订、确认——这个循环把设备建模从编写技术文档,变成了产品经理和工程师之间的自然对话。

我们支持中文、英文、JSON、YAML、Markdown 多种输入方式。字段命名偏好可以在描述中直接指定,模型会照做。


像聊天一样控制设备

设备智能体创建完成后,日常交互只有一个动作:说话。

「把目标温度设置为 24 度,切换到自动模式。」智能体根据设备规格自动选择合适的命令、生成参数、下发到设备。查询也一样——「查看当前状态,告诉我最近有没有上报事件」——智能体读取遥测数据和事件记录,用自然的语言回复。

多设备管理不需要跳转页面。在输入框里@thermostat-01就可以指定目标设备,@多台设备可以同时查询或对比。

定时任务也只需要一句话。「每 5 分钟检查一次温度,超过 30 度就把目标温度调到 24 度。」智能体将请求保存为内置定时器,到期后网关独立唤起执行。你随时可以问「当前有哪些定时任务在跑」,然后说「取消它」。


用语音对话,用视觉观察

语音交互的链路对用户完全透明——麦克风采集音频、实时转写为文本、智能体理解并执行、回复合成为语音播放。

我们接入了火山引擎、阿里云 DashScope、AWS 和 ElevenLabs 四家语音服务商,覆盖国内外主流平台。控制台里选一个服务商、填上 Key,设备就能开口说话。SDK 层面也简单。设备端连接/ws/voice,发送 16kHz 单声道 PCM 音频帧,接收 TTS 音频帧播放。通常建议先在控制台验证链路,再把代码集成到真实设备。

如果你同时开启了摄像头,语音请求结束时画面也会一并提交。问一句「这个指示灯是什么颜色的?」,智能体结合语音和图像给出回答。


技能与工具:让智能体超越设备本身

FlowMQ 以云原生的统一消息架构,支撑 AI Agent

设备命令定义的是设备自身的动作——开关、调温、切换模式。但实际业务中,智能体往往需要查询外部系统或执行复杂流程。我们把能力分为三层。设备的事写在规格里,固定流程的知识写在技能里,外部系统的调用写在工具里。

技能是一个.zip包——里面是一份SKILL.md描述和处理模板。导入后,用户不需要手动调用。说出意图,智能体自动判断是否加载对应技能并按模板回复。

工具更进一步——它是可执行的 TypeScript 代码,用 TypeBox 定义参数 Schema。保存后写入运行时,用户在对话中说出意图,智能体自动编排:先读取设备状态,再调用工具计算,最后通过设备命令执行控制。

一键 SDK,零硬件调试

设备规格确认之后,接入真实硬件只需要一步:点击「接入设备」,选择语言,下载工程。

我们生成 C、Python、TypeScript 三种语言的设备端 SDK。每一套工程都包含 MQTT 连接、命令响应、状态上报、事件上报、语音客户端和视觉客户端代码。你只需要在device.*里补充硬件逻辑——怎么读传感器、怎么控制执行器、什么时候触发事件。

如果你连设备端业务逻辑都还没写,也可以在对话里描述处理规则——「每 30 秒读取 DHT22 传感器上报遥测,温度超过 30 度触发告警」——智能体会在 SDK 工程基础上生成包含完整业务逻辑的可运行代码。

没有真实硬件的时候,用浏览器模拟器。它会根据设备规格创建一台临时虚拟设备,自动连接 MQTT、上报状态、响应命令。产品经理可以在硬件原型就绪前验证交互体验。


开放协议,去中心化协作

单台设备的智能化解决之后,下一个问题是多台设备如何协同。

A2A 是我们基于 EMQX 6.2 实现的智能体间通信协议,使用 MQTT v5 作为传输层、JSON-RPC 作为调用格式。没有中央控制器,每个智能体都是对等的网络节点——自动发现、任务协商、能力调用。

启用 A2A 只需在创建智能体时打开一个开关。设备规格中的每个命令自动发布为可供其他智能体发现的技能。你还可以创建「组合应用」——选择多个设备智能体,写一段协作目标,交给编排智能体统一协调。

此外,Device Agent 支持接入飞书、钉钉、Slack、Discord、Telegram 五条 IM 通道。每条通道支持白名单按用户 ID 限制访问。团队成员在已有协作工具里就能查询和控制设备。


模型与基础设施

我们接入 20+ 大模型服务商——OpenAI、Anthropic、Google、DeepSeek、Qwen、Kimi、Ollama,以及 AWS Bedrock、Azure OpenAI 等平台聚合入口。控制台里选择服务商、填上 Key 即可切换。视觉模型可以独立配置,也可以关闭以降低成本。

底层跑在 EMQX 消息引擎之上——千万级设备并发接入能力,全链路 MQTT 标准协议。平台支持私有化部署,设备数据留在你自己的基础设施里。

快速开始

软件开发正在进入智能体时代,我们相信硬件开发也会跟上。

从单品智能到系统智能,从封闭生态到开放互联——这是我们正在做的事,也是物联网行业正在发生的变化。

Device Agent 支持本地一键启动。安装完成后,即可在浏览器控制台中创建第一个设备智能体、生成设备 SDK、启动模拟器,并通过自然语言控制设备。

macOS / Linux:

curl -fsSL https://emqx.sh/device-agent | sh

Windows PowerShell:

powershell irm https://emqx.sh/device-agent.ps1 | iex

这里还有一个福利哦

想和我们一起畅谈技术和产品吗?快快加入我们吧!⬇️⬇️⬇️⬇️

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
6胜2负!超级黑马冲到CBA第二 上赛季无缘季后赛

6胜2负!超级黑马冲到CBA第二 上赛季无缘季后赛

夕落秋山
2026-11-03 00:07:21
600万顶薪先生!王奕博罚球8中3决战时刻送广东绝平机会险成罪人

600万顶薪先生!王奕博罚球8中3决战时刻送广东绝平机会险成罪人

狼叔评论
2026-11-02 22:40:03
贵州省黔南州政协原党组书记、主席瓦标龙被开除党籍和公职

贵州省黔南州政协原党组书记、主席瓦标龙被开除党籍和公职

大象新闻
2026-11-02 11:08:03
美国坠机事故更多细节:飞机1分钟内下降超8000米;与地面通话录音曝光:女飞行员坠毁前绝望尖叫

美国坠机事故更多细节:飞机1分钟内下降超8000米;与地面通话录音曝光:女飞行员坠毁前绝望尖叫

新民周刊
2026-11-02 16:50:42
被停职审查、套现开溜、私生活混乱,董明珠身上标签该真相大白了

被停职审查、套现开溜、私生活混乱,董明珠身上标签该真相大白了

眼底星碎
2026-10-09 12:19:24
苹果iOS 27.2更新无法阻止百度网盘摇一摇广告,知情人士回应称并非特意绕开

苹果iOS 27.2更新无法阻止百度网盘摇一摇广告,知情人士回应称并非特意绕开

IT之家
2026-11-02 14:15:00
重磅!马克西飙到第一!才600万啊,76人见捡到宝……

重磅!马克西飙到第一!才600万啊,76人见捡到宝……

体育新角度
2026-11-02 21:49:03
约托娃宣布胜选

约托娃宣布胜选

政知新媒体
2026-11-02 09:21:37
1992年叶利钦初次访华,国宴中喝下一斤茅台,据随行人员透露:准备回国前,他在钓鱼台哭了半小时

1992年叶利钦初次访华,国宴中喝下一斤茅台,据随行人员透露:准备回国前,他在钓鱼台哭了半小时

磊子讲史
2026-10-26 15:13:37
踩断一个踏板,花了半个月调查,可结果呢?

踩断一个踏板,花了半个月调查,可结果呢?

芳华青年
2026-11-02 15:32:11
今天起,央八、优酷、湖南卫视3部大剧来袭!你追哪部?

今天起,央八、优酷、湖南卫视3部大剧来袭!你追哪部?

乡野小珥
2026-11-03 00:05:26
16TB  !苹果新机官宣:11月6日,正式开卖!

16TB !苹果新机官宣:11月6日,正式开卖!

科技堡垒
2026-11-02 11:03:35
中期选举最后冲刺!纽约时报民调�...

中期选举最后冲刺!纽约时报民调�...

新浪财经
2026-11-02 21:04:35
不忍直视!鸿蒙智行、赛力斯销量双双腰斩,被蔚来也反超了

不忍直视!鸿蒙智行、赛力斯销量双双腰斩,被蔚来也反超了

ZAKER新闻
2026-11-02 00:16:11
胡明轩罕见暴怒!在老板面前砸水箱,与亚帅发生冲突,摊牌了

胡明轩罕见暴怒!在老板面前砸水箱,与亚帅发生冲突,摊牌了

多特体育说
2026-11-03 00:05:40
35 万英镑周薪!阿森纳想拿欧冠,就必须留住未来队长,赖斯拿队内第一高薪没问题

35 万英镑周薪!阿森纳想拿欧冠,就必须留住未来队长,赖斯拿队内第一高薪没问题

夏侯看英超
2026-11-03 00:44:50
FBI确认:币安63亿美元被盗案,朝鲜是幕后黑手

FBI确认:币安63亿美元被盗案,朝鲜是幕后黑手

深蓝财经
2026-11-01 21:16:43
乌军地上、地下两路突击 保加利亚亲俄总统胜选

乌军地上、地下两路突击 保加利亚亲俄总统胜选

西楼饮月
2026-11-02 22:44:18
身价千万又如何,抗癌一年的魔术师刘谦,如今头发灰白瘦到认不出

身价千万又如何,抗癌一年的魔术师刘谦,如今头发灰白瘦到认不出

老娱记啊
2026-10-31 15:43:42
导演江小鱼去世,年仅56岁

导演江小鱼去世,年仅56岁

大风新闻
2026-11-02 17:23:03
2026-11-03 01:20:49
首席信息官 incentive-icons
首席信息官
以数字化和商业创新为视角
557文章数 131关注度
往期回顾 全部

科技要闻

连AI都有领导了!DeepSeek让它们自己抢活干

头条要闻

中国警察凌晨叫醒来华旅游外籍男子 原因引起关注

头条要闻

中国警察凌晨叫醒来华旅游外籍男子 原因引起关注

体育要闻

24岁老秀:说最狂的话,打最勇的球

娱乐要闻

宋慧乔首次公开离婚真相,原因心酸

财经要闻

央行:股票回购增持再贷款利率降至1%

汽车要闻

百万超跑同款悬架? 第二代海豹07野心不小

态度原创

家居
房产
健康
手机
教育

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

新一轮来了!海口官方,下场收房!

查不出猝死风险?可能是项目没做对

手机要闻

iPhone Duo开售一周黄牛亏懵了 商户:黄牛做折叠屏全部都亏

教育要闻

最适合国内985&211&英本申请的保底学校!

无障碍浏览 进入关怀版