- 简介
- 目录大纲
- 最新文档
多模态交互套件使用手册
AIUI机器人多模态套件开发文档 目录 一、编写目的 二、包装清单及实体图 三、支持功能 四、使用指南 4.1多模态体验 4.1.1接线 4.1.2设备联网 4.1.3多模态软件体验 4.1.4合成播报(需接扬声器) 4.2客户集成 4.2.1工作模式1:作为输出语音交互结果从机模式 4……
admin - 2025年1月15日 14:12
多模态交互套件音频传输协议
上位机可通过网络与RK3588多模态盒子建立音频传输通道,可参照开发包中的Android示例代码实现。 音频传输协议 概述 上位机可以通过建立tcp连接来获取到实时唇形降噪后的音频数据。 设备IP:如果盒子为动态ip,可通过发送串口指令来获取ip。 指定端口:9080 消息格式 消息格式与串口协议类似,唯一不同点为消息数据长度位从2个字节扩充到4个字节。 字节 值 含义说明 0 0……
admin - 2025年1月14日 16:30
多模态交互套件视频传输协议
上位机可通过socket与RK3588多模态盒子建立视频传输通道,可参照开发包中的Android示例代码实现摄像头视频预览。 视频传输协议 概述 上位机可以通过socket连接盒子来获取到实时图像帧数据,以及人脸检测结果信息。 设备IP:如果盒子为动态ip,可通过发送串口指令来获取ip。 指定端口:9090 消息格式 消息格式与串口协议类似,唯一不同点为消息数据长度位从2个字节扩充到4个字节。 ……
admin - 2025年1月14日 15:34
产品规格
规格参数 基本参数 | 类型 | 参数 | | --- | --- | | SOC | RockChip RK3588S | | CPU | 八核 64 位 (4 ×Cortex-A76+4 ×Cortex-A55) 8nm 工艺,主频2.4GHz | | GPU | ARM Mali-G610 MP4 四核 GPU支持 OpenGL ES3.2 / OpenCL 2.2 / Vulkan1.……
admin - 2024年12月18日 16:15
多模态交互套件产品白皮书
版本记录 版本 更新内容 更新时间 V1.0 初始文档 2024.04.25 V2.0 更改设备主板,确定配件信息 2024.05.31 目 录 产品概述 产品实物图 适用场景 产品特点 产品功能 硬件接口说明 使用模式 硬件尺寸信息 主机规格参数 产品概述 本产品是一款基于多麦克风阵列+人脸检测的整体语音解决……
admin - 2024年12月18日 15:38