聊天机器人应用
your_chat_bot 是基于 tuya.ai 开源的大模型智能聊天机器人。通过麦克风采集语音，语音识别，实现对话、互动、调侃，还能通过屏幕看到实时聊天内容。
功能介绍
- 支持涂鸦语音智能体，支持四种聊天模式：
- 长按对话模式，用户需要一直按着按键才可进行语音输入，松开按键则是结束语音输入。
- 按键对话模式，设备上电默认进入待机状态，用户短按一下按键后设备进入聆听状态，此时用户可进行语音输入，与智能体对话。
- 唤醒对话模式，用户每次对话前都需要说出唤醒词将设备唤醒后，可进行单次对话，类似与音箱对话。
- 随意对话模式，用户通过唤醒词将设备唤醒后，可进行连续对话。若唤醒后没有对话，30S后设备会再次进入待机状态，下次对话前需要再次唤醒。
- 支持按下按键可本地打断对话。
- 支持各种状态提示音，如配网、离线、唤醒等。
- 支持各类显示屏及多套 UI 界面。
- 微信风格
- 聊天机器人
- 滑动字幕，适合 oled 小屏
- 支持 App 调节设备音量。
- 连续上下电 3 次可让设备进入配网模式。
- 支持 App 端实时切换 AI 智能体角色
硬件支持列表
| Board | 配置文件 | UI | PID |
|---|---|---|---|
| T5AI_BOARD 开发板+3.5寸 rgb565 LCD 方屏（ 带触摸， lcd:ili9488， tp：gt1151 ） | TUYA_T5AI_BOARD_LCD_3.5.config | 微信风格 | alon7qgyjj8yus74 |
| T5AI_EVB 开发板 (小白盒, 自带 2.4 寸 spi565 st7789 方屏) | TUYA_T5AI_EVB.config | 聊天机器人 | r3ulobrs5nwreguj |
| T5AI_MOJI_1_28 开发板 ( 自带 1.28 寸 spi565 gc9a01 圆屏) | T5AI_MOJI_1.28.config | 聊天机器人 | kf8wauubey0doaiz |
| T5AI_MINI 开发板+1.3寸 spi565 st7789 LCD 方屏 | TUYA_T5AI_MINI_LCD_1.3.config | 聊天机器人 | 8btswykdiium7t8k |
| DNESP32S3_BOX 开发板 ( 自带 320*340 mcu8080 st7789 lcd 方屏 ) | DNESP32S3_BOX.config | 聊天机器人 | znw8prbujidtzavd |
| DNESP32S3 开发板 ( 自带 320*340 spi st7789 lcd方屏 ) | DNESP32S3.config | 微信风格 | scig7pauzzid3w4b |
| ESP32S3 面包板 ( 自带 128*32 i2c ssd1306 oled 屏 ) | ESP32S3_BREAD_COMPACT_WIFI.config | 滑动字幕 | j1y437proohznfbs |
| 微雪 ESP32S3 开发板 ( 自带 364*448 spi sh8601 lcd方屏) | WAVESHARE_ESP32S3_TOUCH_AMOLED_1_8.config | 微信风格 | lased5audtah8wcp |
| XINGXZHI_ESP32S3_CUBE 开发板 ( 自带 128*64 i2c ssd1306 oled 屏 ) | XINGZHI_ESP32S3_CUBE_0_96OLED_WIFI.config | 滑动字幕 | uyidyzglm2m1bpcl |
文件结构
项目根目录
.
├── app_default.config # 应用默认配置文件
├── assets # 静态资源目录
├── CMakeLists.txt # CMake 构建脚本
├── config # 硬件配置目录
├── include # 头文件存放目录
├── Kconfig # 项目配置文件
├── README_zh.md # 中文说明文档
├── README.md # 英文说明文档
├── script # 脚本目录
└── src # 源码目录
资源目录
├── assets # 静态资源目录
│ ├── lang_config.h # 多语言配置头文件
│ └── zh-CN # 中文语言包
│ └── language.json # 中文文本资源
硬件配置目录
这个config目录下的文件存放的是适配各类板子的配置文件，如果开发者基于这个应用工程适配了新的板子，可在这个目录下添加适配好的配置文件。
├── config # 硬件配置目录
│ ├── DNESP32S3_BOX.config
│ ├── DNESP32S3.config
│ ├── ESP32S3_BREAD_COMPACT_WIFI.config
│ ├── T5AI_MOJI_1.28.config
│ ├── TUYA_T5AI_BOARD_EYES.config
│ ├── TUYA_T5AI_BOARD_LCD_3.5.config
│ ├── TUYA_T5AI_EVB.config
│ ├── TUYA_T5AI_MINI_LCD_1.3.config
│ ├── WAVESHARE_ESP32S3_TOUCH_AMOLED_1_8.config
│ └── XINGZHI_ESP32S3_CUBE_0_96OLED_WIFI.config
辅助工具与脚本目录
├── script # 脚本目录
│ └── gen_lang.py # 多语言资源生成脚本
头文件目录
├── include
│ ├── app_chat_bot.h # 聊天机器人功能头文件
│ ├── app_display.h # 显示模块头文件
│ ├── app_system_info.h # 系统信息（如网络状态，内存等）
│ ├── reset_netcfg.h # 设备上下电重置功能头文件
│ └── tuya_config.h # 设备授权码等信息配置
源码目录
└── src
├── app_chat_bot.c # 聊天机器人功能实现
├── app_system_info.c # 系统信息相关功能
├── display # 显示界面模块
├── reset_netcfg.c # 设备上下电重置功能
└── tuya_main.c # 应用入口
显示模块
├── display # 显示界面模块
│ ├── app_display.c # 显示模块主控制文件
│ ├── CMakeLists.txt # 显示模块的 CMake 配置
│ ├── font # 字体资源目录
│ ├── image # 图片资源目录
│ ├── Kconfig # 显示相关的配置选项
│ ├── tuya_lvgl.c # LVGL 与应用的适配文件
│ ├── tuya_lvgl.h # LVGL 与应用的适配头文件
│ └── ui # UI 界面实现
│ ├── ui_chatbot.c # 聊天机器人界面
│ ├── ui_display.h # UI 模块公共头文件
│ ├── ui_oled.c # OLED 滚动字幕界面
│ └── ui_wechat.c # 微信风格对话界面
应用配置
-
产品 PID
配置宏 类型 说明 TUYA_PRODUCT_KEY 字符串 产品的标识ID，绑定了涂鸦 AI 智能体 -
选择对话模式
配置宏 类型 说明 ENABLE_CHAT_MODE_KEY_PRESS_HOLD_SINGEL 布尔 长按对话模式 ENABLE_CHAT_MODE_KEY_TRIG_VAD_FREE 布尔 按键对话模式 ENABLE_CHAT_MODE_ASR_WAKEUP_SINGEL 布尔 唤醒对话模式 ENABLE_CHAT_MODE_ASR_WAKEUP_FREE 布尔 随意对话模式 -
选择唤醒词
该配置只会在对话模式选择 唤醒对话 和 随意对话 两种模式下才会出现。
配置宏 类型 说明 ENABLE_WAKEUP_KEYWORD_NIHAO_TUYA 布尔 唤醒词是 “你好涂鸦” ENABLE_WAKEUP_KEYWORD_NIHAO_XIAOZHI 布尔 唤醒词是 “你好小智” ENABLE_WAKEUP_KEYWORD_XIAOZHI_TONGXUE 布尔 唤醒词是 “小智同学” ENABLE_WAKEUP_KEYWORD_XIAOZHI_GUANJIA 布尔 唤醒词是 “小智管家”
工作流程
该工程依赖应用组件 ai_audio , 该组件主要实现了采集音频，播放音频，创建云端 AI 会话等功能。
-
长按对话模式
-
按键对话模式
-
唤醒对话模式
-
随意对话模式
编译工程
-
前置环境的安装与配置，请查看 快速入门 。
-
从 TuyaOpen 的根目录切到应用目录
cd apps/tuya.ai/your_chat_bot -
选择对应的开发板配置
tos.py config choice -
编译工程
tos.py build