打造空间AI智能体 - 1
打造空间AI智能体 - 2
打造空间AI智能体 - 3
打造空间AI智能体 - 4
打造空间AI智能体 - 5

打造空间AI智能体

让AI助手认识你、记住你、主动服务你——适用于家庭、办公室、展厅的空间智能化

中级40min语音 AI
Watcherface_recognitiondisplay语音xiaozhi

这个方案能帮你做什么

你家的AI助手很聪明,但它"看不见"——不知道是谁在跟它说话。

想象一下:你下班回家,AI助手能认出你的脸,主动说"欢迎回来,小明!今天有3封重要邮件"。来客人了,它能分辨出是家人还是陌生人。在展厅,它能认出VIP客户,提供专属服务。

这个方案给你的AI助手装上"眼睛"和"大屏",让它真正成为你的空间智能管家。

核心价值

好处具体说明
认人打招呼说"记住我的脸,我叫小明",下次进门自动问候
个性化服务不同的人进来,说不同的话、做不同的事
隐私在手中所有人脸数据存在本地设备,不传到云端
大屏展示把对话内容投到电视/大屏,多人一起看
讲述模式AI 根据对话自动切换背景图片——适合导览、演示、讲故事

适用场景

场景怎么用
智能家庭家人进门自动问候,孩子回家提醒作业,老人起床关心身体
会客接待识别VIP客户,自动推送专属服务信息到大屏
展厅展示AI互动大屏吸引参观者,认脸后记住偏好下次继续聊
办公室早上认出你打招呼,顺便告诉你今天的日程安排

使用须知

输入输出

输入为语音 + 人脸画面;输出为对话语音 + 大屏内容 + 自定义响应动作

人脸识别功能

条件说明
容量最多记住20个人的脸
光线需要正常室内光线,太暗会认不出
角度正脸效果最好,侧脸可能认不准
设备只需要SenseCAP Watcher,你已有的设备即可

大屏投屏功能

条件说明
显示器需要一台支持HDMI的电视或显示器
计算设备需要一台电脑或树莓派来运行投屏服务
网络Watcher和投屏设备要连同一个WiFi

两个功能可以分开装

  • 只想要认人功能?只装人脸识别
  • 只想要大屏?只装投屏功能
  • 都想要?两个一起装,互不影响

方案对比

方案核心设备功能适合谁
大屏投屏SenseCAP Watcher + reComputer R1100投屏对话到电视/显示器展厅演示、多人互动、家庭娱乐
人脸识别SenseCAP Watcher认脸问候、个性化服务智能家庭、VIP 接待、办公自动化

集成接口

mqtt

人脸识别事件

Port: 1883
{"event":"face_recognized","name":"John","confidence":0.92}

使用说明

usb

通过 USB 连接的 SenseCAP Watcher

部署方案

Architecture
voice_assistant
edge_device

下载与安装

套餐: 人脸识别 {#face_recognition}

给小智装上"眼睛",让它认识家人朋友,进门自动打招呼。

设备用途
SenseCAP Watcher带摄像头的 AI 语音助手
USB-C 数据线烧录固件

部署完成后你可以:

  • 进门自动打招呼(识别到熟人会主动问候)
  • 在页面上录入和管理人脸(最多 20 人)
  • 语音控制开关、查询、删除人脸

前提条件: WiFi 网络 · 小智 App 用于绑定设备

步骤 1: 烧录小智固件 {#face_esp32 type=esp32_usb required=true config=devices/watcher_esp32.yaml}

将语音助手程序写入 Watcher 以启用语音交互。

接线

连接设备

  1. 用 USB-C 线连接 Watcher 到电脑
  2. 在上方选择串口(选 wchusbserial 开头的)
  3. 点击烧录按钮

故障排查

问题解决方法
找不到串口换一条 USB 线或换个 USB 口
收不到串口数据按住 BOOT 按钮,按一下 RESET,松开 BOOT,然后重试
烧录失败重新插拔设备再试

步骤 2: 烧录人脸识别固件 {#face_himax type=himax_usb required=true config=devices/watcher_himax.yaml}

将人脸识别程序写入 Watcher 的 AI 芯片。

接线

连接设备

  1. 确保 Watcher 已连接到电脑
  2. 在上方选择串口(选 usbmodem 开头的)
  3. 点击烧录按钮
  4. 点击烧录后,按一下设备的重启按钮进入烧录模式

故障排查

问题解决方法
设备无响应重新插拔 USB 线
烧录卡住或失败按重启按钮重试
反复烧录失败换一条 USB 线或换个 USB 口
烧录到 99% 失败或中途重启关闭其他占用串口的程序,重新插拔 USB 后重试

步骤 3: 配置小智 {#face_configure type=manual required=false}

将 Watcher 连接 WiFi,通过手机 App 绑定账号。

连接 WiFi

设备开机后会提示配网,按语音指引完成 WiFi 连接。

绑定小智账号

  1. 打开小智 App
  2. 扫描设备上显示的二维码
  3. 完成绑定

测试语音

说"小智小智"唤醒设备,测试语音交互是否正常。如能正常对话,说明配置成功。

故障排查

问题解决方法
WiFi 连接失败确保使用 2.4GHz 网络,检查密码
二维码不显示重启设备,等待完全启动

步骤 4: 人脸数据库管理 {#face_enroll type=serial_camera config=devices/face_enroll.yaml required=false}

通过应用界面管理人脸识别数据库。

使用方法

  1. 点击连接启动摄像头预览
  2. 画面会显示实时的人脸检测框
  3. 使用下方的人脸数据库面板管理已注册的人脸

注册新人脸

  1. 点击人脸数据库面板中的注册
  2. 输入姓名
  3. 点击开始采集 — 正对摄像头,保持光线充足
  4. 等待采集完成(约 5 秒)
  5. 新人脸会出现在列表中

故障排查

问题解决方法
提示"请先完成第 X 步"返回对应步骤选择正确的串口
摄像头无画面检查 USB 连接,在步骤 2 中刷新端口
注册失败确保光线充足,正对摄像头,重新尝试

部署完成

人脸识别功能已就绪!下面开始体验。

第一步:在上方面板录入人脸

使用人脸数据库面板录入家人或同事的人脸(步骤见上方"注册新人脸")。

第二步:语音开启人脸识别

拔掉 USB 线,说 "小智小智" 唤醒设备,然后说:

"打开人脸识别"

设备确认后,Watcher 待机时会自动扫描面前的人。

第三步:体验自动识别

走到 Watcher 面前 — 它会自动认出你并打招呼!

语音命令一览

说这句话效果
"打开人脸识别"开启识别功能(首次使用必须先开启)
"关闭人脸识别"关闭识别功能
"删除人脸 XXX"删除已录入的人脸
"你认识谁"列出所有已录入的人脸
"打开熟人模式"熟人免打扰,只在陌生人出现时提醒
"关闭熟人模式"所有人都会触发问候

套餐: 大屏投屏 {#display_cast}

把小智对话投射到电视或大屏幕,适合展厅、会议室等场景。

设备用途
SenseCAP WatcherAI 语音助手
reComputer R1100运行投屏服务
HDMI 显示器显示投屏内容

部署完成后你可以:

  • 大屏实时显示对话内容
  • 按 F 进入全屏演示模式
  • mDNS 自动发现 - 语音控制连接
  • 讲述模式 - AI 控制背景图片,适合演示与导览

前提条件: 所有设备在同一网络

步骤 1: 烧录 Watcher 固件 {#display_watcher type=esp32_usb required=true config=devices/display_watcher.yaml}

将语音助手程序写入 Watcher,为投屏功能做准备。

接线

连接设备

  1. 使用 USB-C 数据线连接 Watcher 到电脑
  2. 在上方选择对应的串口
  3. 如未检测到,请尝试其他 USB 口或更换数据线

故障排查

问题解决方法
找不到串口换一条 USB 线或换个 USB 口
烧录失败重新插拔设备再试

步骤 2: 部署投屏服务 {#display_service type=docker_deploy required=true config=devices/display_local.yaml}

启动投屏服务,将对话内容显示在屏幕上。

部署目标: 本机部署 {#display_service_local type=local config=devices/display_local.yaml}

将投屏服务部署到您的本地电脑。

接线

架构图

  1. 确保 Docker 已安装并运行
  2. 设置显示名称(如"客厅显示器")用于 mDNS 发现
  3. 点击部署按钮启动服务

故障排查

问题解决方法
找不到 Docker安装 Docker Desktop
端口 8765 被占用停止占用该端口的其他服务

部署目标: 远程部署 {#display_service_remote type=remote config=devices/recomputer.yaml default=true}

将投屏服务部署到 reComputer R1100。

接线

架构图

  1. 将 reComputer 连接到网络和 HDMI 显示器
  2. 输入 IP 地址和 SSH 凭据
  3. 设置显示名称(如"会议室显示器")用于 mDNS 发现
  4. 点击部署安装到远程设备

故障排查

问题解决方法
SSH 连接失败检查 IP 地址和凭据
Docker 拉取失败检查网络连接,重试部署
Watcher 找不到投屏设备确保在同一网络,检查防火墙

部署完成

大屏投屏已就绪!

测试方法:

  1. 在显示设备浏览器打开 http://<设备IP>:8765
  2. F 进入全屏模式
  3. 说「投屏到[显示名称]」开始投屏

语音命令: 「打开投屏」、「关闭投屏」、「投屏状态」

讲述模式(新功能): 投屏现在支持讲述模式,AI 可以控制背景图片——适合演示、讲故事、导览等场景。

  1. 点击左上角齿轮图标打开配置面板
  2. 开启「启用讲述模式」
  3. 填入小智 WebSocket MCP 地址,启用 AI 自动切换背景图
  4. 添加触发条件:关键词 + 图片 URL,对话匹配时自动切换背景
  5. N 切换讲述模式,点击小窗可调整大小
联系我们
获取方案参考设计与产品选型支持。
您是否使用过我们的产品?