AI虚拟人能力平台

创建每个人的AI分身,是元宇宙时代最核心的AI能力之一。AI虚拟人能力平台是以魔珐自主研发的虚拟内容协同制作的工业化平台为基础,并通过魔珐自研的AI虚拟人核心技术,包括TTSA技术(文本驱动语音及动画技术),STA技术(语音驱动动画技术),ETTS(有感情的语音合成技术),智能动作与表情合成技术等,结合魔珐自研或第三方智能对话系统及第三方引擎,实现造人,育人,用人的一站式构建AI虚拟人的能力平台,赋能开发者和运营人员在平台上创建多模态交互的AI虚拟人,从而应用在不同的业务场景。

虚拟客服

虚拟老师

虚拟主播

虚拟医生

虚拟政务

Android App iOS App Windows应用 智慧大屏 小程序 网页应用 ... 软硬一体机

企业

个人开发者

ISV

...

形 象 定 制
技 能 定 制
资 产 定 制
语 音 能 力
理 解 能 力
说 话 能 力
表 情 能 力
动 作 能 力
原生技能库
第三方技能库
自定义技能库

对于一般用户,例如产品和运营人员,平台提供零代码构建AI虚拟人产品的能力,即无需编程就可以在平台上,通过造人、育人、用人等创建专属的AI虚拟人产品,例如Android App,iOS APP,网页应用,小程序等,无需二次开发即可直接应用各个业务场景。


对于开发者,平台提供支持多平台AI虚拟人能力应用的开发工具,例如Android SDK、iOS SDK、JS SDK、小程序SDK、API接口等开发者在平台上构建好虚拟人后,通过开发工具将AI虚拟人能力集成在自己的产品中,从而把产品升级支持多模态交互的AI虚拟人产品,应用在各个业务场景。


一站式构建AI虚拟人产品

平台提供一站式构建AI虚拟人产品的能力。对于一般用户,提供零代码构建AI虚拟人产品的方式,即用户无需编程开发就可创建AI虚拟人产品,直接应用在不同平台上;对于开发者,提供了多平台的AI虚拟人开发工具,开发者将虚拟人能力灵活集成自己的产品中,赋能到不同业务场景。


智能化、高效率、规模化的高质量虚拟形象定制

基于魔珐自研的三维虚拟内容制作智能云平台,支持通过智能化的方式,高效率,低成本,规模化的定制各种风格的高质量3D虚拟形象,包含超写实虚拟角色、三维美型角色、卡通角色、二次元角色等。


高质量的语音动画实时智能合成

基于魔珐自研的文本实时合成语音动画技术(Text To Speech and Animation),语音合成动画技术(Speech To Animation),有感情的语音合成技术(Expressive Text To Speech),支持通过语音或者文本智能合成AI虚拟人的语音、嘴型动画、面部表情、肢体动作等,使AI虚拟人可以和真人一样生动逼真,肢体动作自然流畅。


多模态的真人接管驱动

基于魔珐自研的语音合成动画(Speech To Animation),单相机虚拟直播技术,支持通过实时获取真人的语音和图像,驱动虚拟人进行多模态输出。相比于AI虚拟人智能交互的方式,真人接管可以让虚拟人做出更加自然,准确的表达。通过结合AI驱动和真人驱动的方式,虚拟人可应用于更多的场景。


多系统终端支持

通过平台构建的AI虚拟人可以灵活应用在不同的系统终端上,例如Android,iOS,Windows,Linux等平台


灵活的部署方式

支持多种服务部署方式,比如云端部署、本地化部署等。

应用描述

基于自建3D扫描棚和智能建模及绑定等技术,快速、高质量创造企业的虚拟形象,如企业虚拟代言人、虚拟培训官、虚拟雇员等,角色形象包括超写实、三维美型、二次元及卡通形象。结合企业相关信息问答体系,打造可自动收集企业信息、回答问题、讲解企业相关知识的企业各类AI虚拟人,提升企业在品牌展示、品牌宣传、企业文化发展中的效果与效率。


优势

超写实、美型、卡通、二次元等多类型虚拟形象设计与打造能力,打造企业品牌专属形象;
一比一还原真人口型,多语种口型AI合成技术支持;
海量肢体动作库,基于语义自动合成流畅、自然的肢体动作;
支持真人文本、语音、单个摄像头接管,且接管过程肢体动作自然合成可打造高质量、高精度AI虚拟人内容,如长视频、短视频、图片、直播等,支持企业多种场合应用


适用场景

企业培训、企业活动主持、企业代言、企业品牌宣传推广

·典型案例

企业虚拟形象担任发布会活动主持人

应用描述

基于自研超写实3D模型构建、TTSA(文本驱动语音动画合成)技术,将已有AI文本、语音客服升级为以视频为输出形态的多模态虚拟客服,还原真人一对一视频客服模式,提升AI客服的服务体验效果。



优势

专业3D美术团队,高精度超写实虚拟人物打造美术管线; 一比一还原真人口型,多语种口型AI合成技术支持; 海量肢体动作库,基于语义自动合成流畅、自然的肢体动作; 支持真人文本、语音、单个摄像头接管,且接管过程肢体动作自然合成; IOS、Android、HTML5、微信小程序全渠道适配;



适用场景

APP、VoLTE、微信小程序、智慧大屏


·典型案例

华夏银行虚拟客服

应用描述

为品牌、电商平台提供7*24小时AI虚拟主播方案,商家只需预制商品介绍文本和FAQ语料,即可驱动虚拟主播7*24小时介绍对应商品,并在商品介绍间隙回答用户提问,帮助商家提升直播时长、提高店铺整体转化率;


优势

高精度虚拟形象驱动能力,更接近真人带货效果,提升停留时长和转化率; 超写实、美型、卡通、二次元等多类型虚拟形象设计与打造能力,打造品牌专属形象; 支持AI文本驱动、真人语音驱动、单个摄像头真人直播驱动等多种驱动方式,丰富虚拟主播直播形态; 可打造高精度虚拟主播内容,如图片、短视频等,帮助虚拟主播完成从工具人到品牌IP的转化;


适用场景

电商平台、私域流量平台


·典型案例

马丁虚拟电商主播

应用描述

基于自身3D美术研发团队和AI能力,为企业提供从原画、3D建模到AI交互的一站式AI虚拟老师打造服务,应用于3D课程内容制作、AI互动课、双师教学等场景,帮助企业、教学机构提升3D课程内容制作效率,摆脱企业对真人教师的形象依赖,拓展教育行业虚拟IP应用场景;


优势

影视级3D内容全流程打造团队,基于三维虚拟内容协同制作智能云平台赋能的高质量、高效率、高产能3D资产和内容制作管线; 领先的AI驱动算法使得AI虚拟老师表达更流畅、更灵动、更拟人; 备AI文本驱动、真人语音驱动、单个摄像头直播驱动等多种驱动方式,应用场景更广泛;


适用场景

在线教育、校内教育、企业培训


·典型案例

字节跳动瓜瓜龙虚拟口语老师

应用描述

基于自建3D扫描棚和智能建模技术,快速、高质量构建真人医生的3D虚拟化身,结合结构化医疗知识问答体系,打造可自动收集患者信息、回答患者问题、讲解医疗知识的AI虚拟医生,提升患者获取医疗知识的效率,减轻医生负担;



优势

自建高精度3D扫描棚,一比一扫描还原医生形象; AI虚拟医生口型、肢体动作、脸部表情可深度定制,还原真人医生日常表达习惯; 定制化构建虚拟医生知识体系,并持续迭代; 一站式互动视频构建平台,快速打造跨平台、可交互的AI虚拟医生应用;



适用场景

导医导诊、信息采集、心理治疗、视频回访


·典型案例

上海精神卫生中心虚拟治疗师