网易首页 > 网易号 > 正文 申请入驻

物理世界正全面觉醒:硬件行业的“Agent时代”来了!

0
分享至

“让任意IoT设备成为智能体?!”

这听起来像是一句产品经理吹牛的黑话,但在今天的硬件开发圈,它正在变成干掉无数加班夜的现实。

长期以来,智能家居和工业硬件都被嘲笑为“伪智能”,改个功能调动五个团队,换个设备代码全部重写。

AI 浪潮拍打了一年多,物理世界却依然像个局外人。

如果你也厌倦了为了一个对话界面去重构整条代码链,那么这场关于硬件静默转变的工程革命,你绝对不能错过。

今天,我们做了一个不同的选择:

Device Agent 发布|一句话,让任意 IoT 设备成为 AI Agent

Device Agent 是一个 MQTT 驱动的 AI 设备智能体平台。你用自然语言描述设备的能力,平台在几分钟内生成完整的设备智能体——包含设备规格、端侧 SDK、在线模拟器,以及语音、视觉、IM 等多通道交互入口。

它不是连接层之上的一个 AI 对话界面,而是一条从设备建模到多智能体协作的完整工具链。



本文将系统介绍 Device Agent 的设计理念、核心能力与技术架构,阐释如何通过自然语言驱动的设备建模、多模态交互、技能扩展与去中心化协作能力,将每一台物理设备快速转化为具备理解、决策与协同能力的 AI 智能体。

用自然语言描述设备

创建一台设备的 AI 智能体,起点不是写代码,而是写一段话。描述你的设备是什么、能执行什么命令、会上报什么状态、会产生什么事件。系统自动生成结构化的设备规格——命令、属性、事件,以及每个字段的类型和约束。

如果生成的规格不符合预期,在对话中继续沟通就好。左侧对话修订,右侧实时预览。描述、预览、修订、确认——这个循环把设备建模从编写技术文档,变成了产品经理和工程师之间的自然对话。

我们支持中文、英文、JSON、YAML、Markdown 多种输入方式。字段命名偏好可以在描述中直接指定,模型会照做。



像聊天一样控制设备

设备智能体创建完成后,日常交互只有一个动作:说话。

「把目标温度设置为 24 度,切换到自动模式。」智能体根据设备规格自动选择合适的命令、生成参数、下发到设备。查询也一样——「查看当前状态,告诉我最近有没有上报事件」——智能体读取遥测数据和事件记录,用自然的语言回复。

多设备管理不需要跳转页面。在输入框里就可以指定目标设备,多台设备可以同时查询或对比。

@thermostat-01

定时任务也只需要一句话。「每 5 分钟检查一次温度,超过 30 度就把目标温度调到 24 度。」智能体将请求保存为内置定时器,到期后网关独立唤起执行。你随时可以问「当前有哪些定时任务在跑」,然后说「取消它」。



用语音对话,用视觉观察

语音交互的链路对用户完全透明——麦克风采集音频、实时转写为文本、智能体理解并执行、回复合成为语音播放。

我们接入了火山引擎、阿里云 DashScope、AWS 和 ElevenLabs 四家语音服务商,覆盖国内外主流平台。控制台里选一个服务商、填上 Key,设备就能开口说话。SDK 层面也简单。设备端连接,发送 16kHz 单声道 PCM 音频帧,接收 TTS 音频帧播放。通常建议先在控制台验证链路,再把代码集成到真实设备。

/ws/voice

如果你同时开启了摄像头,语音请求结束时画面也会一并提交。问一句「这个指示灯是什么颜色的?」,智能体结合语音和图像给出回答。



技能与工具:让智能体超越设备本身

FlowMQ 以云原生的统一消息架构,支撑 AI Agent

设备命令定义的是设备自身的动作——开关、调温、切换模式。但实际业务中,智能体往往需要查询外部系统或执行复杂流程。我们把能力分为三层。设备的事写在规格里,固定流程的知识写在技能里,外部系统的调用写在工具里。

技能是一个包——里面是一份描述和处理模板。导入后,用户不需要手动调用。说出意图,智能体自动判断是否加载对应技能并按模板回复。

.zip

SKILL.md

工具更进一步——它是可执行的 TypeScript 代码,用 TypeBox 定义参数 Schema。保存后写入运行时,用户在对话中说出意图,智能体自动编排:先读取设备状态,再调用工具计算,最后通过设备命令执行控制。

一键 SDK,零硬件调试

设备规格确认之后,接入真实硬件只需要一步:点击「接入设备」,选择语言,下载工程。

我们生成 C、Python、TypeScript 三种语言的设备端 SDK。每一套工程都包含 MQTT 连接、命令响应、状态上报、事件上报、语音客户端和视觉客户端代码。你只需要在里补充硬件逻辑——怎么读传感器、怎么控制执行器、什么时候触发事件。

device.*

如果你连设备端业务逻辑都还没写,也可以在对话里描述处理规则——「每 30 秒读取 DHT22 传感器上报遥测,温度超过 30 度触发告警」——智能体会在 SDK 工程基础上生成包含完整业务逻辑的可运行代码。

没有真实硬件的时候,用浏览器模拟器。它会根据设备规格创建一台临时虚拟设备,自动连接 MQTT、上报状态、响应命令。产品经理可以在硬件原型就绪前验证交互体验。



开放协议,去中心化协作

单台设备的智能化解决之后,下一个问题是多台设备如何协同。

A2A 是我们基于 EMQX 6.2 实现的智能体间通信协议,使用 MQTT v5 作为传输层、JSON-RPC 作为调用格式。没有中央控制器,每个智能体都是对等的网络节点——自动发现、任务协商、能力调用。

启用 A2A 只需在创建智能体时打开一个开关。设备规格中的每个命令自动发布为可供其他智能体发现的技能。你还可以创建「组合应用」——选择多个设备智能体,写一段协作目标,交给编排智能体统一协调。

此外,Device Agent 支持接入飞书、钉钉、Slack、Discord、Telegram 五条 IM 通道。每条通道支持白名单按用户 ID 限制访问。团队成员在已有协作工具里就能查询和控制设备。



模型与基础设施

我们接入 20+ 大模型服务商——OpenAI、Anthropic、Google、DeepSeek、Qwen、Kimi、Ollama,以及 AWS Bedrock、Azure OpenAI 等平台聚合入口。控制台里选择服务商、填上 Key 即可切换。视觉模型可以独立配置,也可以关闭以降低成本。

底层跑在 EMQX 消息引擎之上——千万级设备并发接入能力,全链路 MQTT 标准协议。平台支持私有化部署,设备数据留在你自己的基础设施里。

快速开始

软件开发正在进入智能体时代,我们相信硬件开发也会跟上。

从单品智能到系统智能,从封闭生态到开放互联——这是我们正在做的事,也是物联网行业正在发生的变化。

Device Agent 支持本地一键启动。安装完成后,即可在浏览器控制台中创建第一个设备智能体、生成设备 SDK、启动模拟器,并通过自然语言控制设备。

macOS / Linux:

curl-fsSL https://emqx.sh/device-agent | sh

Windows PowerShell:

powershellirm https://emqx.sh/device-agent.ps1 | iex

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
男子肿瘤指标飙升,但胃肠镜、腹部CT等结果均未见异常,原因竟然是每天吃海参,医生提醒:灵芝孢子粉、冬虫夏草等保健品或诱发指标升高

男子肿瘤指标飙升,但胃肠镜、腹部CT等结果均未见异常,原因竟然是每天吃海参,医生提醒:灵芝孢子粉、冬虫夏草等保健品或诱发指标升高

极目新闻
2026-11-01 22:44:42
DeepSeek 公布 Super Agent 架构;苹果超越英伟达,重回市值第一;传 Meta 与傅利叶打造 Muse 机器人

DeepSeek 公布 Super Agent 架构;苹果超越英伟达,重回市值第一;传 Meta 与傅利叶打造 Muse 机器人

极客公园
2026-11-01 08:36:31
最大帮手现身?难怪伊朗越来越强硬,先进战机已敲定,只欠收货

最大帮手现身?难怪伊朗越来越强硬,先进战机已敲定,只欠收货

风干迷茫人
2026-11-02 22:57:11
单季利润暴增 10 倍:存储五巨头首次全面超越美国五大科技公司

单季利润暴增 10 倍:存储五巨头首次全面超越美国五大科技公司

TechWeb
2026-11-02 11:24:05
徽剑案最瘆人细节:主犯分了40万赃款,却请全国优秀刑辩律师,出场费动辄上百万,一个底层打手的钱从哪条黑链来?

徽剑案最瘆人细节:主犯分了40万赃款,却请全国优秀刑辩律师,出场费动辄上百万,一个底层打手的钱从哪条黑链来?

秋风妃
2026-11-02 20:44:09
前TVB男星在广东中山被偶遇,目前已经不拍戏,专注做饮食生意

前TVB男星在广东中山被偶遇,目前已经不拍戏,专注做饮食生意

笑饮孤鸿非
2026-11-02 18:40:06
红果短剧,正在悄悄透支整整一代人的未来。

红果短剧,正在悄悄透支整整一代人的未来。

老陆不老
2026-10-22 05:10:02
CCTV16直播连津大战!冯博轩捂脸走出机场,宋岳不停赛,德尔加多等官宣

CCTV16直播连津大战!冯博轩捂脸走出机场,宋岳不停赛,德尔加多等官宣

刀锋体育
2026-11-02 17:32:06
儿子去世留下70平和120平两套拆迁房,七旬老太自愿放弃全部继承权,只求“终身独居小套房屋”,儿媳不同意老人独占,法院判了

儿子去世留下70平和120平两套拆迁房,七旬老太自愿放弃全部继承权,只求“终身独居小套房屋”,儿媳不同意老人独占,法院判了

扬子晚报
2026-11-02 07:42:32
日本人早已看透:一旦中日真开战,中国根本不是只打眼前这一仗

日本人早已看透:一旦中日真开战,中国根本不是只打眼前这一仗

阿芒娱乐说
2026-10-21 07:59:10
利好来了!刚刚,全线拉升!美伊谈判,传来大消息

利好来了!刚刚,全线拉升!美伊谈判,传来大消息

证券时报
2026-11-02 19:00:20
2026年结束前,一旦我国房贷利率跌破1%,90%购房者恐将面临这5大厄运!

2026年结束前,一旦我国房贷利率跌破1%,90%购房者恐将面临这5大厄运!

新国学文化
2026-10-28 14:08:30
马斯克还要威胁限速星链吗?乌军工不屑已经开始硬刚!

马斯克还要威胁限速星链吗?乌军工不屑已经开始硬刚!

今观天下
2026-11-02 09:03:36
加密货币世纪大劫案幕后黑手,是拥有众多臭名昭著记录的朝鲜黑客组织“TraderTraitor”。

加密货币世纪大劫案幕后黑手,是拥有众多臭名昭著记录的朝鲜黑客组织“TraderTraitor”。

凡人学电脑
2026-11-01 22:08:21
广东爆冷遭逆转惹众怒,多位媒体人发声,矛头对准亚帅:心太大了

广东爆冷遭逆转惹众怒,多位媒体人发声,矛头对准亚帅:心太大了

萌兰聊个球
2026-11-02 22:31:09
少女妈和赵小刀的恩怨!

少女妈和赵小刀的恩怨!

八卦疯叔
2026-10-28 10:12:17
断电断油、吃不上肉!被美国封锁60年的古巴,最终向现实低头

断电断油、吃不上肉!被美国封锁60年的古巴,最终向现实低头

白浅娱乐聊
2026-11-02 14:24:42
著名诗人宁宇逝世,享年91岁

著名诗人宁宇逝世,享年91岁

澎湃新闻
2026-11-02 10:46:29
订婚宴前夕,未婚妻当众和初恋搂抱亲吻,我摘下婚戒甩她脸上扭头就走,后来得知她后悔得天天哭,我连眼皮都没抬

订婚宴前夕,未婚妻当众和初恋搂抱亲吻,我摘下婚戒甩她脸上扭头就走,后来得知她后悔得天天哭,我连眼皮都没抬

晓艾故事汇
2026-10-01 11:14:09
109-112!广东主场爆冷遭青岛逆转,创29年最差开局,想杜锋了吧

109-112!广东主场爆冷遭青岛逆转,创29年最差开局,想杜锋了吧

萌兰聊个球
2026-11-02 22:04:42
2026-11-03 03:27:00
首席信息官 incentive-icons
首席信息官
以数字化和商业创新为视角
557文章数 131关注度
往期回顾 全部

科技要闻

连AI都有领导了!DeepSeek让它们自己抢活干

头条要闻

外籍男子凌晨突然被中国警察叫醒 原因引起关注

头条要闻

外籍男子凌晨突然被中国警察叫醒 原因引起关注

体育要闻

24岁老秀:说最狂的话,打最勇的球

娱乐要闻

宋慧乔首次公开离婚真相,原因心酸

财经要闻

央行:股票回购增持再贷款利率降至1%

汽车要闻

百万超跑同款悬架? 第二代海豹07野心不小

态度原创

房产
本地
手机
公开课
军事航空

房产要闻

新一轮来了!海口官方,下场收房!

本地新闻

十月奔赴迪庆,解锁梅里日照金山

手机要闻

iPhone Duo开售一周黄牛亏懵了 商户:黄牛做折叠屏全部都亏

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

以总理敦促特朗普中期选举后恢复对伊战争 特朗普回应

无障碍浏览 进入关怀版