UE 5虚拟人开发必备-语音识别与语音合成大模型本地化实战

第一节：准备UE模块环境

0.2小时

第二节：创建基础接通文件

0.1小时

第三节：创建HTTP框架

0.2小时

第四节：HTTP通用请求

0.0小时

第一节：构建PaddleSpeech管理单例

0.1小时

第二节：定义语音识别的请求和响应结构

0.2小时

第三节：定义语音合成的请求和响应结构

0.2小时

第四节：定义语音合成的流式请求

0.0小时

第五节：定义语音分类的请求和响应

0.1小时

第六节：定义文本处理的响应

0.0小时

第七节：日志的错误反馈

0.1小时

第一节：Json序列化语音识别请求和响应

0.2小时

第二节：Json序列化语音合成请求和响应

0.2小时

第三节：Json序列化语音合成流式请求

0.0小时

第四节：Json序列化语音分类请求和响应

0.1小时

第五节：Json序列化文本后处理响应

0.0小时

第六节：Json最后调整

0.0小时

第一节：封装语音合成请求

0.2小时

第二节：封装语音合成响应代理

0.1小时

第三节：测试语音合成蓝图API

0.1小时

第四节：语音识别请求代码架构

0.2小时

第五节：语音识别服务器测试

0.1小时

第六节：解决语音识别服务器报错问题

0.1小时

第七节：整合语音分类

0.2小时

第八节：整合文本处理

0.2小时

第九节：http流式语音合成整合

0.3小时

第一节：websocket环境搭建

0.1小时

第二节：websocket结构应用

0.1小时

第三节：架构ASR服务器对接的Websocket框架

0.1小时

第四节：ASR语音识别websocket协议分析

0.2小时

第五节：websocket语音识别和语音合成架构

0.2小时

第六节：封装websocket语音识别调用API

0.1小时

第七节：定义请求和响应的json结构

0.1小时

第八节：PCMBuffer到websocket服务器

0.2小时

第九节：websocektASR语音识别测试

0.1小时

第一节：演示websocket流式语音合成

0.1小时

第二节：UE的websocket流式框架和API

0.1小时

第三节：分析tts-websocket流式协议

0.1小时

第四节：定义tts-websocket请求和响应结构

0.1小时

第五节：UE处理websocket协议

0.2小时

第六节：将流式语音合成暴露到蓝图

0.1小时

第七节：测试UE版websocket流式语音合成

0.1小时

第八节：测试UE版HTTP的流式语音合成

0.1小时

第一节：ASR语音识别流式服务器配置和启动

0.1小时

第二节：标点符号预测服务器配置和启动

0.1小时

第三节：语音合成服务器配置和启动

0.1小时

第四节：多服务器配置和启动

0.1小时

第五节：客户端的命令测试

0.0小时

第一节：音频数据采集

0.1小时

第二节：线上v100-32G训练

0.1小时

第三节：训练后的模型如何使用

0.2小时

第一节：介绍一下番外篇

0.0小时

第二节：启动HTTP和WebSocket服务器

0.1小时

第三节：Websocket麦克风流式语音识别

0.1小时

第四节：Websocket流式语音合成

0.1小时

第五节：HTTP的语音合成

0.1小时

第六节：HTTP的合成

0.1小时

第七节：HTTP的流式语音合成

0.1小时

第八节：HTTP语音分类

0.1小时

第九节：HTTP文本处理

0.0小时

第十节：关于插件代码使用方面内容

0.0小时