如果您恰巧需要这些技术来辅助您开发虚拟人技术,做垂直领域的客服,讲解员,医生,律师,情侣,伙伴,角色扮演,那么这套课程将解决您的虚拟人技术方面的问题,提供离离线模型解决方案,在线模型的解决方案,甚至,可以将两者融合达到最终理想的方案。
课程信息
教学总时长约6.5小时,使用软件:unreal engine。
适用行业:游戏引擎;难易度:中级。
交流答疑
对于课程内容相关的疑问,提供有交流群,不但可以在群里与同学交流,分享资料,与教程内容有关的技术问题还可以进入答疑专区寻求帮助。老师一般会在2个工作日内为您解答。
课程目录
第一章:虚拟人三点布光
0101_虚拟人模型准备
0102_三点部光
0103_构建Gameplay框架
0104_构建UI框架
0105_聊天框蓝图逻辑
第二章:语音麦克风与文心一言
0201_离线和在线部署介绍
0202_阿里云的麦克风聊天
0203_阿里云的账户配置
0204_接通百度文心一言聊天
0205_接通百度文心账户
0206_文心一言的流式回复
0207_流式基于UI回复
0208_文心流式回复分段语句功能
0209_接通阿里云语音合成
第三章:在线版本口型技术
0301_准备音频转口型客户端插件
0302_口型和音频播放队列设计
0303_音频和口型同步绑定
0304_口型音频的同步逻辑
0305_测试线上口型效果
第四章:ChatGPT流式分段处理
0401_语言的模型类型动态切换
0402_语言的模型类型
0403_实战ChatGPT对话
0404_高级封装ChatGPT返回语句
0405_ChatGPT流式回复
0406_ChatGPT流式语句分段处理
第五章:蓝图版本Config操作
0501_接通离线版本口型服务器
0502_类型和界面切换格局讲解
0503_ChatGPT参数设置面板
0504_文心一言参数设置面板
0505_语音类型参数模板切换
0506_口型类型参数模板切换
0507_公共参数设置
0508_Bilibili直播参数设置
0509_StableDiffusion参数设置
第六章:ChatGPT和文心一言配置
0601_高效的本地配置
0602_文心一言ini读取和存储配置
0603_ChatGPTInit本地配置
0604_蓝图的提炼和结构化封装
第七章:ChatGPT生成图片
0701_ChatGPT回复上下文
0702_ChatGPT生成图片
0703_布置作业
第八章:接通离线版本PaddleSpeech
0801_本地化语音识别和合成部署
0802_接通本地化语音识别麦克风
0803_PaddleSpeech语音合成队列播放
0804_PaddleSpeech文本处理
第九章:离线版本语言模型
0901_ChatGLM环境准备
0902_如何使用ChatGLM
0903_ChatGLM上下文回复
第十章:离线版本流式口型队列生成
1001_连续离线流式口型原理
1002_LiveLink流式口型队列生成
1003_测试队列流式离线口型
第十一章:Stablediffuion绘图
1101_stablediffuion环境讲解
1102_stablediffuion中英文切换
1103_stablediffuion文生图逻辑
1104_stablediffuion文生图测试
1105_stablediffuion获取绘制进度
1106_stablediffuion进度图显示
第十二章:Bilibili直播技术
1201_bilibili直播获取弹幕环境配置
1202_通过账户验证来获取B站弹幕
1203_验证获取弹幕
1204_发送弹幕
1205_测试bilibili发送弹幕
第十三章:虚拟人热更新
1301_热更新环境准备
1302_热更新HTTP服务器环境准备
1303_热更新的本地化部署
第十四章:BlendShape动画口型技术
1401_BS虚拟人脸部动画防定死的切换
1402_BS虚拟人动画释放问题
多端支持
课程支持ios及Android端设备播放,您只需要登录各大手机应用平台,搜索“ABOUTCG学院“下载安装应用。
课程要求
本教学需要您对基础的3D概念和术语有一定的了解,比如Polygon,Edge,FaceAxis,Space,Map等。