Live3D

Live3D

网站信息

  • 简称:Live3D
  • 语言:英文
  • 时间:2024-09-09
  • 热度:40℃
  • 官方网址:live3d.io
  • 关键词: 虚拟偶像 虚拟直播
  • 网站介绍

    Live3D:基于Unity3D 引擎开发的虚拟偶像直播及动画制作软件

    Live3D 是一款基于Unity3D 引擎开发的虚拟偶像直播及动画制作软件,它基于动作捕捉、面部捕捉等技术,结合实时渲染、语音控制等系统,应用于模型 DIY、虚拟直播、视频创作、海报宣发、漫画产出等领域,是一套集创作与宣发于一体的软件。

    产品优势

    • 自带海量云端资源:Live3D 自带丰富的云端资源,包括模型、场景、动作等,为用户的创作提供了丰富的素材和强大的支持。

    • 精准的捕捉技术:支持多种捕捉方式,如普通摄像头捕捉、iphoneX 面部捕捉、Hi5 手套(手指捕捉)结合诺亦腾全身动作捕捉以及声音捕捉等。同时,还能支持导入音频并精准匹配音频对应的口型。

    • 支持自定义导入资源:用户可以自定义导入模型(pmx、fbx、vrm)、动作(fbx)、场景资源(图片 / 视频 /bundle)等,实现个性化创作。

    • 支持快捷键盘控制表情、动作、镜头:在直播或视频制作过程中,用户可以通过快捷键盘触发特殊的二次元表情(如黑线、冷汗、星星眼等)和夸张效果的动作,提升节目效果。此外,快捷键盘对挂件也同样适用。

    • 支持捏人:即使不会建模,用户也能通过 Live3D 的捏人功能轻松获取专属模型。在基本模的基础上,捏人功能包括捏脸、换装、捏身体、换发型、手持道具等,用户可以根据自己的个性化需求进行调整和设计,从而得到独一无二的个性化模型。

    • 支持做海报 / 漫画:用户将模型导入 Live3D 后,除了可以进行直播和动画制作外,还可以利用漫画功能自定义摆造型、加特效、加文字,制作出趣味连环漫画。无论是发布视频时需要的封面,还是活动宣发时需要的海报,都可以通过漫画功能轻松实现。

    支持功能及应用场景

    1、虚拟直播

    Live3D 的直播功能本身不具备推流模块,推流部分需要第三方推流工具来实现,如 OBS、某平台直播助手等。它主要应用于 win7 及以上版本操作系统的 PC 端直播。若部分 APP 直播模块支持 PC 端推流,经过一定设置,还可以将 PC 的内容投射到 app 端直播,实现间接手机直播,如 kilakila、抖音等。

    • 捕捉方式:支持显示器捕捉、窗口捕捉、游戏源捕捉,但不支持视频捕获设备通过虚拟摄像头直接将真人表情映射到模型上的捕捉方式。

    • Live3D 应用的直播原理:通过第三方推流工具推流窗口、桌面。

    Live3D 如何作用于虚拟直播:

    • 面捕捕捉:面捕捕捉技术是虚拟直播的基础,它连接了虚拟与现实,实现了真人表情到虚拟形象面部的实时同步。通过普通电脑摄像头或 iphone x 及以上版本的型号的手机摄像头捕捉面部表情,即可实时同步眉、眼、口表情。

    • 挂件模式:一键开启挂件,即刻出现可移动的动态模型的透明背景图。此功能免去了扣背景色的过程,瞬间实现虚拟主播做游戏实况的效果。

    • 支持外接动捕,可实时可视化动捕数据:一键开启动捕功能,实时将动捕数据转化为可视化动作,同步呈现在 Live3D 的预览界面。即用户在电脑另一端穿动捕做什么样的动作,电脑这端的 Live3D 预览界面人物就会怎么动,所见即所得。此功能将动捕这个偏后期的工具转化成了实时同步的工具,实现了穿动捕做的动作能实时同步直播。

    • 快捷键盘控制:Live3D 的快捷键盘可放入动作、表情、机位等。通过电脑键盘触发 Live3D 快捷键盘内的动作、表情、机位。对于直播过程中无法通过面捕、动捕做到的表情、动作,可通过快捷键盘触发。例如,提前在快捷键盘放置特殊的二次元表情(如汗颜、黑线、星星眼)、特殊夸张的动作,可在直播过程中及时触发,以提升节目效果。

    • 声控动作:声控动作即通过声音来触发动画序列。Live3D 的行为功能将声音作为触发条件,音调作为动作序列分类条件。将音调分为高音、正常音、低音、无声,用户可自定义在某个音调下设置对应的动作、表情、机位序列。通过用户对麦发声的音调高低,触发相应音调下的动画序列。此功能解放了双手,用户提前在对应音调下定义好动画序列,作为表演者只需要对着麦说话,Live3D 会根据音高自动匹配相应的动作。

    直播玩法及应用场景:

    • 游戏解说:方案为面部捕捉 + 挂件模式 + 快捷键盘(选用) + 第三方推流工具。玩法是开启挂件直播,提取透明背景的模型挂件,放置屏幕一角,开启面捕,让模型同步实时表情。可实现虚拟角色出现在屏幕一角,声情并茂地解说游戏实况的效果,再通过第三方推流工具,使用显示器捕捉,连带画面及挂件整个屏幕推流,开启虚拟游戏实况解说。

    • 内容杂谈:方案一为面捕捕捉(摄像头面捕,iphoneX 面捕) + 云端场景 / 自定义场景 + 快捷键盘(选用) + 动作捕捉(选用) + 第三方推流工具;方案二为面捕捕捉(摄像头面捕,iphoneX 面捕) + 云端场景 / 自定义场景 + 快捷键盘(选用) + 动作捕捉(选用) + 第三方推流工具 + 声控动作。如进行杂谈、粉丝互动等,虚拟主播可以将自己的模型导入到 Live3D 里,结合面捕、动捕跟踪,搭配 Live3D 云端场景或自定义背景,通过第三方推流预览窗口,实现虚拟主播声情并茂、手舞足蹈解说、互动的效果。

    • 才艺展示:方案为音频口型功能 + 第三方推流工具。在没有动捕的情况下,主播想让虚拟角色为大家表演一段舞蹈、情景动画等,可以通过音频口型跟踪功能,预制好带有音频的动画,实现即兴才艺表演的效果。动画可自定义设计,动作来源可以是 Live3D 动作库的云端动作或导入的自定义动作(fbx 格式动作)。

    2、捏人功能

    在 Live3D 给定的基础模上,通过捏脸、捏体型、换装等操作,组合设计一个全新的专属模型。

    适用范围:捏人的模型仅在 Live3D 中使用,不支持导出。但对于 Live3D 里的所有功能均适用。

    3、动画功能

    动画功能可以看做一个动画编辑器(工厂),编辑器里可放入的元素有动作、表情、机位、音频等,通过一定的线索拼接组成序列动画。

    • 动作来源:云端动作库、自定义上传的动作。

    • 表情来源:预制表情、自定义捏制的表情。

    • 机位来源:预制机位、自定义制作的机位。

    • 音频来源:支持 WAV,外部导入音频(WAV,MP3)。

    • 应用场景:可用于制作动画短片、动画等。

    4、漫画功能

    漫画模块用于封面、海报、漫画周边产出。提供漫画布局、丰富的漫画设计素材(如特效元素、文字框),用户可自定义 pose、表情、文字,通过精心摆放设计,可做出精美的单页海报或一张张趣味的连环漫画。

    应用场景:

    封面,文案配图:运营虚拟 IP 的过程中,在如 B 站等其他平台发布视频或文章时,一个好看的封面会更加吸睛,一个好的配图会增添文章的趣味性。漫画功能可以满足用户的需求,通过自定义摆 pose、多种背景、特效元素等,让封面、配图有无限种创意,让每次做封面、配图不再费力。

    宣传海报:运营虚拟 IP 过程中免不了举办各种线上线下活动,活动需要宣发,海报是少不了的。同封面、文案配图一样,给 Live3D 导入虚拟 IP,在漫画模块设计 pose、选背景、加效果元素,即可完成一张精美的单页海报。

    漫画周边:除了封面、文案配图、宣传海报,漫画功能还提供了多种共画布及丰富文字边框,用户可以发挥想象力,拼凑一张张漫画剧情,串联一部有趣的连环漫画(本子),丰富 IP 人设,福利众多粉丝。

    5、个性化支持

    自定义导模型:支持用户将 pmx、vrm 的模型导入 Live3D。支持导入的模型格式有:fbx,对于外部的模型,只要模型的基本表情通道完善(如眨眼、张嘴),有骨骼,动力学,导入 Live3D 后,所有功能均能正常使用。

    • 自定义导动作:支持用户导入的动作数据到 Live3D,并在 Live3D 中正常使用。支持的动作格式:fbx。

    • 自定义导场景:支持用户导入的场景数据到 Live3D,并在 Live3D 中正常使用。支持的场景格式:图片 (PNG、JPG、JPEG、HDR),场景 (BUNDLE)(MP4) ,三维。

    • 自定义捏表情:支持用户按照需要,手动捏制个性化表情。表情丰富程度,取决于用户模型表情通道的设计及数量。

    • 自定义制作机位 / 镜头:支持用户简易做机位,可选择跟随机位、固定机位,可选择跟随部位包括身体、左手、右手、第一人视角,过渡方式包括平滑过渡、闪回、交叉缩放、黑场过渡,时间可自定义。

    • 粒子特效:特效作用于模型,应用于 Live3D 主屏,特效种类包括附着特效、拖尾特效等,可进行特效参数设置,如特效跟随位置、偏移位置。

    产品特色

    • 强大的捕捉技术:支持多种精准的捕捉技术,包括面部捕捉、手指捕捉、全身动作捕捉和声音捕捉等,能够实现真人表情和动作到虚拟形象的实时同步。

    • 丰富的自定义功能:支持用户自定义导入模型、动作、场景,捏制表情,制作机位 / 镜头等,满足用户的个性化需求,实现独特的创作。

    • 实时可视化与同步:通过外接动捕可实时可视化动捕数据,将动捕从后期工具转化为实时同步工具,实现穿动捕做的动作能实时同步直播。

    • 创意互动功能:快捷键盘控制和声控动作功能,为直播和创作过程中增加了特殊的二次元表情和夸张动作,以及通过声音触发动画序列的互动方式,提升了节目效果和创作的趣味性。

    • 多应用场景支持:适用于虚拟直播、模型 DIY、视频创作、海报宣发、漫画产出等多个领域,为虚拟偶像内容的产出和推广提供了全方位的支持。

    总结

    Live3D 是一款功能强大、特色鲜明的虚拟偶像内容产出工具,它整合了多种先进技术,为用户提供了丰富的资源和功能,满足了用户在虚拟内容创作和传播方面的多样化需求。无论是专业的创作者还是普通用户,都可以通过 Live3D 实现自己的创意,打造出独特的虚拟形象和精彩的内容。其个性化支持和多应用场景的特点,使得它在虚拟偶像领域具有较高的实用性和竞争力。

    THE END