AIUI文档中心
AIUI文档导览
1. AIUI平台服务
1.1 AIUI平台介绍
1.2 AIUI应用介绍
1.3 AIUI服务链路介绍
1.4 AIUI平台能力概述
1.5 快速体验
2. AIUI应用配置
2.1 应用发布
2.2 语义精简协议介绍
2.3 基础配置
2.4 语义模型配置
2.5 回复角色配置
2.6 语音识别配置
2.7 结构化语义配置
2.8 星火大模型配置
2.9 语音合成配置
2.10 应用后处理配置
2.11 三方大模型配置
3. AIUI SDK开发
3.1 AIUI SDK接入流程
3.2 AIUI SDK基础信息
3.2.1 SDK接口说明
3.2.2 参数配置说明
3.2.3 消息事件说明
3.2.4 SDK状态说明
3.2.5 数据发送方式
3.2.6 回调解析说明
3.2.7 交互结果协议说明
3.3 AIUI SDK基础能力
3.3.1 流式识别
3.3.2 离线识别
3.3.3 语音唤醒
3.3.4 语音合成
3.3.5 用户个性化
3.3.6 自定义参数
3.4 传统语义链路接入
3.4.1 链路配置说明
3.4.2 个性化数据使用
3.5 通用大模型链路接入
3.5.1 链路配置说明
3.5.2 个性化数据使用
3.5.3 超拟人合成
3.5.4 声音复刻
3.6 极速超拟人链路接入
3.6.1 链路配置说明
3.6.2 个性化数据使用
3.6.3 流式合成
3.6.4 声音复刻
3.6.5 RTOS系统SDK接入
3.7 错误码列表
3.8 发音人列表
4. AIUI API开发
4.1 传统语义链路
4.1.1 交互API
4.1.2 用户个性化API
4.1.3 合成能力使用
4.2 通用大模型链路
4.2.1. 服务鉴权
4.2.2 交互API
4.2.3 用户个性化API
4.2.4 声音复刻API
4.2.5 合成能力使用
4.3 极速超拟人链路
4.3.1 服务鉴权
4.3.2 交互API
4.3.3 用户个性化API
4.3.4 声音复刻API
4.3.5 合成能力使用
5. 自定义业务
技能工作室概述
名词解析
技能
意图和语料
实体
动态实体
模糊匹配
填槽对话
技能设计规范
语音技能设计规范
开放技能接入审核规范
开放技能图标图片规范
技能开发
创建技能和意图
意图配置
技能测试
技能发布
技能后处理
技能导入导出
云函数APIv2.1
云函数APIv2.0
智能体开发
智能体对接
问答库开发
语句问答
关键词问答
文档问答
设备人设开发
技能协议
语义协议:重要字段和通用字段
技能后处理协议:标准请求
技能后处理协议:请求校验
技能后处理协议:Request_v2.1协议
技能后处理协议:Response_v2.1协议
技能资源限制
6. 硬件模组
RK3328 降噪板
RK3328降噪板白皮书
RK3328降噪板使用手册
RK3328降噪板规格书
RK3328降噪板协议手册
RK3328 AIUI评估板开发套件
RK3328评估板白皮书
RK3328评估板使用手册
RK3328评估板规格书
RK3328评估板开发手册
RK3588 AIUI多模态开发套件
RK3588一体机多模态产品规格书
RK3588多模态套件使用手册
视频传输协议
识别语义传输协议
音频传输协议
ZG803 离线语音识别套件
ZG803 产品白皮书
USB声卡套件
USB声卡产品白皮书
USB声卡使用指南
AC7911 AIUI语音开发套件
AC7911-产品白皮书
AC7911-快速体验指南
AC7911-开发指南
AC7911-协议手册
AC7911-硬件参数
AIUI评估板接入
集成方式
软件包说明
AIUIServiceKitSDK
串口SDK
评估板参数配置
调试升级
7. 常见问题处理
7.1 AIUI常见问题
7.2 评估板常见问题
7.3 动态实体常见问题
8. 联系方式
9. 服务条款
AIUI开放平台服务协议
AIUI开放平台隐私政策
小飞在家用户协议
小飞在家隐私政策
小飞在家开源软件使用许可
讯飞账号隐私政策
讯飞账号用户协议
讯飞带屏音箱用户协议
讯飞带屏音箱隐私政策
AIUI SDK隐私政策
AIUI SDK合规使用说明
本文档使用 MrDoc 发布
-
+
首页
AIUIServiceKitSDK
## 交互理解 ## AIUI的交互类似一个IO系统,I(Input)就是发送给AIUI的AIUIMessage, O(Output)就是AIUI抛出来的AIUIEvent。开发者通过集成AIUI SDK, 发送AIUIMessage、接收AIUIEvent。 AIUIServiceKit中提供的AIUIAgent就是和AIUIService交互的桥梁,通过发送不同的`AIUIMessage`控制AIUI的运行, AIUI通过`AIUIListener`将不同的`AIUIEvent`抛出来给开发者进行解析。 ## 接口说明 ## **AIUIAgent** AIUIServiceKit中用于与AIUIService交互的接口类为`AIUIAgent`。`AIUIAgent`提供如下接口: ~~~ java //创建AIUIAgent实例 static void createAgent(Context context, AIUIListener listener) //发送AIUI消息 void sendMessage(AIUIMessage message) //销毁AIUIAgent实例 void destroy() ~~~ **AIUIListener** 创建`AIUIAgent`时传递的参数`AIUIListener`是用于接收AIUIService抛出事件的监听器。`AIUIListener`定义如下: ~~~ java interface AIUIListener { void onEvent(AIUIEvent event); } ~~~ **AIUIEvent** `AIUIListener`中监听的抛出事件是`AIUIEvent`。`AIUIEvent`定义如下: ~~~ java class AIUIEvent { int eventType; //事件类型 int arg1; //参数1 int arg2; //参数2 String info; Bundle data; } ~~~ AIUI定义了多种`AIUIEvent`,有不同`eventType`。当`AIUIEvent`取不同的`eventType`时,其余字段有不同的定义,详细定义请见[AIUIEvent](https://aiui-doc.xf-yun.com/project-1/doc-14/#aiuievent)的定义说明。 **AIUIMessage** AIUIAgent中`sendMessage`方法用于向AIUIService发送AIUI消息。消息类型是`AIUIMessage`。 `AIUIMessage`定义如下: ~~~ java class AIUIMessage { int msgType; //消息类型 int arg1; //参数1 默认空值 0 int arg2; //参数2 默认空值0 String params; //默认空值 "" byte[] data; //默认空值 null } ~~~ AIUI定义了多种`AIUIMessage`,有不同的`msgType`。当`AIUIMessage`取不同的`msgType`时,其他成员有不同的定义,详细定义解释请见[AIUIMessage](https://aiui-doc.xf-yun.com/project-1/doc-14/#aiuimessage)的定义说明。 ## 调用流程 ## AIUIServiceKit的一般调用流程如下: ~~~ java AIUIListener listener = new AIUIListener() { @Override public void onEvent(AIUIEvent event) { switch (event.eventType) { //唤醒事件 case AIUIConstant.EVENT_WAKEUP: { break; } //结果事件(包含听写,语义,离线语法结果,定义和解析格式参见4.6 AIUIEvent一节) case AIUIConstant.EVENT_RESULT: { break; } //休眠事件 case AIUIConstant.EVENT_SLEEP: { break; } //错误事件 case AIUIConstant.EVENT_ERROR: { break; } } } AIUIAgent agent = AIUIAgent.createAgent(MainActivity.this, listener); agent.sendMessage(new AIUIMessage(AIUIConstant.CMD_RESET_WAKEUP, 0, 0, null, null); ~~~ 具体的实现编码可以参考开发包中的AIUIDemo源码实现。 <IflyHeader />
admin
2022年11月7日 20:15
转发文档
收藏文档
上一篇
下一篇
手机扫码
复制链接
手机扫一扫转发分享
复制链接
Markdown文件
分享
链接
类型
密码
更新密码