随趣科技有限公司
随趣科技有限公司虚拟人技术传播者

公司成立于2021年,是全球范围内少数同时拥有全栈3D AIGC技术和自然语言生成式大模型技术的前沿人工智能公司。

󦌑136 2108 0965

󦘑136 2108 0965

󦗑1039900924

󦌡1039900924@qq.com

shoto虚拟主播是如何制作出来的?

2023-05-08254

Shoto虚拟主播是一款由中国科学技术大学(USTC)与上海蓝色鲸科技有限公司合作研发的虚拟主播。它是一种基于人工智能技术和计算机图形学技术的虚拟人形角色,可以通过语音合成和情感识别技术,模拟出人类的语言和表情,从而与观众进行互动。那么,Shoto虚拟主播是如何制作出来的呢?

Shoto虚拟主播的建模是由计算机图形学技术完成的。首先,需要采集一个真实人的三维面部模型。这可以通过使用3D扫描仪或者摄像头进行采集。采集的数据会被传输到计算机中,

接下来,需要对采集到的数据进行清理和修正。由于采集过程中可能会出现数据缺失或者噪声干扰,需要对这些数据进行清理和修正,使得三维模型更加真实和精细。需要对三维模型进行纹理贴图。这是为了使得虚拟主播的皮肤、衣服等物品看起来更加真实。需要对虚拟主播进行骨骼绑定。这是为了使得虚拟主播可以进行动作,模拟出人类的表情和动作。

二、语音合成

Shoto虚拟主播的语音合成是由人工智能技术完成的。首先,需要采集一个真实人的语音数据。这可以通过录音设备进行采集。采集的数据会被传输到计算机中,

接下来,需要对采集到的数据进行清理和修正。由于采集过程中可能会出现噪声干扰或者语音不清晰的情况,需要对这些数据进行清理和修正,使得语音数据更加清晰和准确。需要对语音数据进行特征提取。这是为了从语音数据中提取出有用的信息,如音高、音量、语调等。这些信息会被传输到语音合成模型中,生成虚拟主播的语音。需要对虚拟主播的语音进行后期处理。这是为了使得虚拟主播的语音看起来更加自然和流畅。

三、情感识别

Shoto虚拟主播的情感识别是由人工智能技术完成的。它可以通过分析观众的语音、图像和文字等多种数据,识别出观众的情感状态。

首先,需要建立一个情感识别模型。这个模型可以通过机器学习技术进行训练,使得它可以识别出不同情感状态下的语音、图像和文字等数据。需要对观众的数据进行采集和分析。这可以通过使用摄像头、麦克风等设备进行采集。采集的数据会被传输到情感识别模型中,需要对虚拟主播的情感状态进行调整。这是为了使得虚拟主播的表情和语气更加贴近观众的情感状态,从而更好地与观众进行互动。

Shoto虚拟主播是一款基于人工智能技术和计算机图形学技术的虚拟主播。它可以通过语音合成和情感识别技术,模拟出人类的语言和表情,从而与观众进行互动。它的制作过程包括建模、语音合成和情感识别等多个环节。这些环节都需要借助先进的技术和算法,才能实现虚拟主播的高度还原和自然表现。