基于文本实时生成元宇宙人物的语音和三维动画技术(TTSA)
使用业界先进的深度学习技术,基于文本实时自动生成高质量的元宇宙人物的语音和动画数据,实现了从简单的语音助手到有形象可交互的元宇宙数字助手的转变,可以让客户用最自然的方式和元宇宙人物进行对话。
基于真人语音输入实时生成元宇宙人物三维动画技术(STA)
通过天润智力的语音合成动画(Speech To Animation)技术,可以驱动元宇宙人物实时合成嘴型动画、面部表情、肢体动作等,且合成的内容和语音信息高度的匹配,使元宇宙数字人可以像真人一样生动逼真,表现自然流畅。
有感情的语音合成(ETTS)
ETTS(emotional text to speech)是有感情的tts(语音合成),一般的tts是比较机械化,etts则是在tts过程中,保留类似真人的音调和韵律,听起来更有感情。
对话系统(NLP)
对用户的问题进行处理,理解用户的语义、意图,再进行匹配生成对应的回复。
智能动作生成
在TTSA或者STA中使用,理解语义,然后根据语义匹配或者实时生成对应的动作和表情
音色转换技术(VC)
基于语音的音色转换技术,将初始音色的声音通过天润智力自研的VC算法可实时转换成目标音色的音频进行输出。