跳到主要内容

设备与云端协作

面向智能体的 TuyaOpen 设备把工作一分为二:设备负责必须即时的部分,云端负责必须聪明的部分。选择下面的菜谱,看它们如何协作。

智能烤箱的功能作为工具调用暴露给规划菜谱的 AI 智能体

实际演示:智能烤箱

选择一道菜谱,然后点击"运行"逐步查看协作过程。

点击"运行"开始菜谱。
云端智能体 · 推理
规划:180°C,约 12 分钟,上下发热管
临近结束时决定检查
根据图像判断熟度
设备 · 工具调用
set_temperature(180)设定 180°C
set_heat(both, on)开启上下发热管
set_time(12)设定 12 分钟
start()开始烘焙
take_photo()拍摄曲奇
stop()金黄——停止加热

谁负责什么

这一分工适用于每一个面向智能体的设备,而不只是烤箱。实时的感知与执行在设备侧;知识、推理与语言在云端。

在设备上

实时 · 本地 · 低延迟

  • 采集麦克风音频并检测语音(VAD)
  • 唤醒词与对话模式——决定何时聆听
  • 播放语音回复、音乐与提示音
  • 采集摄像头画面并显示实时预览
  • 渲染屏幕上的对话 UI
  • 在真实传感器与执行器上运行 MCP 工具调用
  • 即使网络不稳也能低延迟响应
MCP

在云端

知识 · 推理 · 持续进化

  • 语音识别(ASR)——语音转文本
  • 语言理解与生成(NLG)
  • 世界知识与逐步推理
  • 智能体角色、Prompt 与长期记忆
  • 技能编排与任务规划
  • 云端 MCP 接入外部服务与 API
  • 多语种音色——无需重新烧录即可进化

设备负责必须即时的部分,云端负责必须聪明的部分。

深入了解