国产免费软件VUP让你轻松成为Vtuber虚拟主播

2020年5月16日13:30:27 评论 10,570,130
摘要

这款软件的表情捕捉细致程度并不如facerig,但是从实际观看效果来说并无影响,反而因为表情跟踪不灵敏才更有动漫的那味。facerig有点太灵敏了,有些小表情被捕捉会让神态有些奇怪。总之:VUP的神态效果属于目前行业的主流

VUP-VTuber Maker(以下简称VUP);

说实话第一吸引我的就是它底下写的免费。steam上除了我原来用的facerig似乎就只有它能有同样的功能。可以说是唯二的选择了。国产免费软件VUP让你轻松成为Vtuber虚拟主播

VUP是一款用于虚拟直播,动画产出的工具软件。使用Unity3D引擎开发,基于时间线,用于动作数据录制,编辑。基于动作捕捉、面部捕捉等技术,精准同步真人的动作、表情至虚拟角色,实现多虚拟角色互动直播,感受跨次元的即时交互体验。国产免费软件VUP让你轻松成为Vtuber虚拟主播

官方介绍

VUP是一款虚拟偶像运营工具,基于强大的实时捕捉技术,如面部捕捉技术,动作捕捉技术,低成本,零基础实现动画短视频制作,多人跨平台虚拟直播,广泛应用于VTuber,虚拟主播领域,开启人人都是虚拟主播的新纪元。其支持资源自定义,资源云端化,不受设备限制,丰富您的创作资源,为您的创作赋能。

VUP具有以下特性

(1)精准的捕捉技术

支持普通摄像头面部捕捉,Noitom全身动作捕捉,虚拟动力全身动捕(含手指),leapmotion,Hi5手指捕捉,青瞳光学捕捉以及高精准的声音捕捉等。

(2)资源自定义及云端化

支持用户自定义上传人物模型,动作,场景等资源。同时能够对参数进行编辑,实现资源多样化,云端化,共享化。

(3)多人同屏/联机

引入房间概念,支持用户创建,加入房间,自定义房间参数,实现多人同屏,互联互娱。

(4)粉丝弹幕互动

支持多平台直播间弹幕互动,通过设置“弹幕互动”,实现将粉丝的弹幕/礼物,转化为具备动画效果的趣味道具,呈现于直播间,活跃直播气氛。

安装方式

官网下载:http://www.vlivemax.com/index.html或者steam上搜索VUP下载。

使用教程

以obs为例

点开VUP软件,选择一个模型,在直播选项卡中把摄像头选好,然后开启面部捕捉,头部捕捉,上半身捕捉等。还有个作为虚拟摄像头可以选择点开启

左面会有个窗口实时显示你的表情捕捉情况在obs里添加一个窗口捕获——这样可以捕获左面那个实时显示的窗口的形象。

如果第一步里你已经开了作为虚拟摄像头的选项可以在obs里添加一个摄像头捕获,我更建议后者

(挂件模式如何挂到游戏里我也未搞明白,可能是比如采集卡全屏录制的时候用的)obs直播推流。

我的使用体验和经验:

除了支持面部表情、眼睛运动和头部追踪以外,还支持上半身、全身、甚至手指的追踪。功能潜力比facerig大很多。(要不怎么乳yao啊)想了解Facerig这款软件的跳转二次元虚拟主播-facerig教程

可以支持直接把虚拟形象挂到直播间,不过还是缺乏引导。

自动设置还是不够完善,基本上功能默认都是关闭的,我刚进入的时候对着电脑晃了半天,没有反应——原来是摄像头捕捉没开。然后几乎所有想要的功能都要一个一个手动点开,而且用这个软件的时候都要重复一遍同样的操作 ,耗费时间比较多。

UI界面设计的简洁性上也需要提高。

经验(骚操作):

VUP可以导入live2D的人物模型,按照网络上的教程也可以自己制作一个专属的形象,如果你不想那样做,我还有个我独创的骚操作。目前steam中VUP社区内容还很少(就是啥也没有),但是作为老牌的面部追踪软件facerig的steam社区中却有着玩家上传的丰富的各类模型资源。

其实VUP是可以导入这些模型的,比如我看到了一个mur猫的模型,在评论区里正好有作者分享的百度云链接,直接把链接的文件下载然后在VUP中的模型选项卡里点加号把那个文件打开,然后就导入了。

由于我也是刚用这个软件,所以向评论区里没有百度云链接的模型情况怎么处理我还没遇到,不过我推测应该在steam的安装目录里找到下载的模型文件。

一、快速开始

展开

1.1个性化设置

1.1.1角色自定义

设置直播角色国产免费软件VUP让你轻松成为Vtuber虚拟主播

角色库存放预制角色,本地角色,云端角色,点击所需角色封面图,可切换到该角色。

主播可将自己的人物模型导入到VUP中,用于直播。自定义角色方法:参看教程【VUP资源导入及云端化教程--人物模型篇】

1.1.2表情自定义

自定义特殊表情(补充面捕无法做出的表情)国产免费软件VUP让你轻松成为Vtuber虚拟主播

表情库存放预制表情,本地表情(自定义表情),表情支持快捷键触发。

主播可为自定义角色自制趣味表情,用于直播过程中的触发(毕竟某些二次元表情如:黑线,晕,汗无法用面捕做出)。

所以,提前捏制好这些特殊表情,可用在直播中,增加虚拟直播趣味性。

国产免费软件VUP让你轻松成为Vtuber虚拟主播

1.1.3动作自定义主播可自定义动作,如一段舞蹈,丰富直播内容,补充动捕无法做出的夸张动作。

自定义动作方法:参看教程【VUP资源导入及云端化教程--fbx动作篇】

国产免费软件VUP让你轻松成为Vtuber虚拟主播

1.1.4场景自定义

可自定义直播间背景(png图片场景/mp4视频/3D场景)

自定义场景方法:参看教程【VUP资源导入及云端化教程--场景篇】

同时VUP还支持对场景做光影设置(光照角度,强度,景深,环境光,光晕,颜色滤镜)。

国产免费软件VUP让你轻松成为Vtuber虚拟主播

1.2开始你的第一个直播

设置好角色,动作,场景,一切准备工作做好,即可开始用VUP开播。

VUP为主播直播提供以下支持:捕捉接口(iphoneX面捕,Noitom动捕,Hi5手指捕捉等),覆盖了从面部到全身,细节到手指的所有关键点捕捉。

在捕捉的基础上,还提供挂件玩法,粉丝弹幕互动玩法,多人同屏玩法。

VUP直播流程如下

外设接入(连接摄像头,穿戴调试动捕)--->开启VUP捕捉按钮--->按需要,设置直播玩法(挂件,弹幕,多人同台)--->第三方推流(如用obs推流)

1.2.1捕捉设备穿戴,调试

(1)iphoneX面捕app的安装及设置(如有设备)【iphoneX面捕近期上线敬请期待】

(2)Noitom动捕设备,Hi5穿戴与本地调试(如有设备)主播头戴动捕头盔,头盔上夹着IPhoneX手机,身着全身动捕(含Hi5手套),同时进行面捕+动捕。

Noitom动捕,Hi5手套穿戴及设置方法见:2.2.11.2.2

VUP捕捉设置

(1)映射直播角色的表情通道通道映射方法见:2.1.1(2)

(2)插入电脑摄像头,开启“摄像头面部捕捉”按钮摄像头面捕设置见:2.1.1(3)

(3)开启Noitom动捕按钮,Hi5捕捉按钮,并调试(如有设备)以上,设置完成,通过表情捕捉,动作捕捉,将演员的一娉一笑,一举一动虚拟角色化,实现了虚拟直播。

1.2.3VUP玩法介绍

展开

(1)挂件玩法

适用情景:单人直播,多人同屏直播均可采用挂件方式实现挂件玩法是为了便捷特殊情境下的虚拟直播,如做游戏,解说类虚拟直播,多主播同屏联机直播。

开启【挂件模式】,挂件窗口可选择滤除背景色,窗口边缘,只保留角色,挂件角色可调整大小,角度,锁定

挂件玩法设置详情见:2.3挂件效果如下图,下图背景可以是游戏画面,解说画面

国产免费软件VUP让你轻松成为Vtuber虚拟主播

(2)粉丝弹幕互动玩法通过设置VUP弹幕参数,可实现粉丝在平台直播间,发送礼物,弹幕,直播画面内,会实时出现具备动画效果的道具实体。

如下图,粉丝给主播刷辣条礼物,从直播画面中可看到,从主播头顶上落下辣条道具

弹幕玩法设置,详情见:2.4

国产免费软件VUP让你轻松成为Vtuber虚拟主播

(3)多人同屏玩法

多人同屏:指多个角色通过“房间”联机,一同出现在屏幕中。

VUP多人同屏引入了房间的概念,提供公共房间,自定义房间。

公共房间:指VUP官方提供的房间,所有用户无需密码,直接加入。

自定义房间:指用户创建的房间,其他用户可以来房间“串门”。

房主可选择设置房间密码,邀请其他主播加入。

用户进入房间后,亦可切换角色

国产免费软件VUP让你轻松成为Vtuber虚拟主播

(1)加入房间如上图,找到房间模块,可看见房间列表,列表含多个公共房间,用户自定义房间。

对于没设置密码的房间,点击房间简介右侧的【加入房间】,即可自动加入房间

对于设置密码的房间,如下图,输入房间密码,点击【加入房间】即可房间密码由房主提供

国产免费软件VUP让你轻松成为Vtuber虚拟主播

(2)创建房间点击【创建房间】,即可进入下图界面

如图,输入房间名称,最大人数,房间密码可根据自己的需要设置,设置完成后点击【应用设置】,即可设置成功

若有用户加入你的房间,用户信息会放在【应用设置】下方

国产免费软件VUP让你轻松成为Vtuber虚拟主播

加入房间后即可实现多角色同台效果如下图国产免费软件VUP让你轻松成为Vtuber虚拟主播

多人同屏玩法设置,详情见:2.5

1.2.4第三方推流

设置方法见:2.6

二、直播设置

2.1面部捕捉设置

展开

2.1.1摄像头面部捕捉设置

(1)插入电脑摄像头

(2)映射直播角色的表情通道(Live2D模型无需映射)

  • 鼠标悬停在直播角色卡片上,点击“笑脸”图标,进入表情通道映射界面。
  • 点击每个表情通道右侧的“小眼睛”图标,以此时左侧模型的表情作为参考表情
  • 下拉,选择匹配此表情通道的表情选项
  • 设置完成,点击保存,表情通道匹配完成

国产免费软件VUP让你轻松成为Vtuber虚拟主播

(3)开启VUP面部捕捉按钮直播--->功能--->【开启】摄像头面部捕捉--->选择输入设备(当前插入的摄像头型号)--->即可开始面部捕捉

国产免费软件VUP让你轻松成为Vtuber虚拟主播

我们可以组合调节“平滑值”,“眼部放大”,“嘴部放大”,“眉毛放大”等参数,来提升面捕效果

显示面具:勾选上,如下图所示,则以面具来隐藏真人脸,避免曝光。

是否镜像:勾选上,则画面角色表情同步,就像真人照镜子样去呈现。

头部旋转:勾选上,面捕过程中,晃动脑袋,角色头部也会同步晃动。

上半身旋转:勾选上,面捕过程中,晃动上半身,角色上半身也会同步晃动。

头部旋转,上半身旋转均可通过调节旋转幅度,平滑值,偏移值,轴映射来优化当前情况的旋转效果。

2.1.2iphoneX面捕app的安装及设置【iphoneX面捕近期上线敬请期待】

2.1.3iphoneX面捕按钮设置与开启【iphoneX面捕近期上线敬请期待】

2.2动作捕捉设置(省略游戏主播用不到)

2.3挂件玩法

国产免费软件VUP让你轻松成为Vtuber虚拟主播

操作流程如下

(1)按照你的需要,新增礼物/关键词互动

点击【新增礼物互动】,【新增关键词互动】即可新增一条“礼物互动”,“关键词互动”。

我们可以对新增的互动,做进一步设置。

可设置:道具类型,单个道具展示时长,单屏所能容纳道具最大数量如下图如图

国产免费软件VUP让你轻松成为Vtuber虚拟主播

如图:左图为“关键词互动”设置,右图为“礼物互动”设置

二者的区别在于:左图是给“粉丝发送的弹幕”做设置,右图是给“粉丝发送的礼物”做设置。

以左图“刷弹幕”为例,弹幕设为“666”,道具设为“冰阔落”,时长设为“5S”,最大数量设为“30”

会实现这样的效果:粉丝在平台直播间给主播发送弹幕“666”,发送1个“666”,就会出现一个“冰阔落”从主播头上落下,这个冰阔落从出现到消失,用时5S。所以说,当大量粉丝疯狂刷屏666的时候,从主播头顶上会落下大量的“冰阔落”,主播可以设置,单个屏幕最多展示的“冰阔落”数,分批显示冰阔落。

对于右图,只是把刷弹幕换成刷礼物,道理相同。

(2)启动所需的礼物/关键词互动

新增礼物/关键词互动,默认开启国产免费软件VUP让你轻松成为Vtuber虚拟主播

我们可选择关闭不需要的互动点击右侧“ON”,即可从ON状态转为OFF,则该互动关闭如下图

国产免费软件VUP让你轻松成为Vtuber虚拟主播

(3)输入你的直播间地址

启动所需的“互动”,就要关联直播间了

国产免费软件VUP让你轻松成为Vtuber虚拟主播

如上图,选择直播平台,在直播间地址处输入“你的直播间地址”,并启动直播间地址。

(4)设置生效

设置互动效果,关联过直播间,

  • 最后一步很关键,请在所有设置完成后,务必点击【应用】
  • 否则,以上设置都不会生效
  • 注:同理,每做一次设置更改,都需要点击【应用】,这样更改才生效

以上操作完成后,你会发现,粉丝在你的直播间刷弹幕,刷礼物,在VUP的display界面(推流界面)“你设置的道具会从你角色头顶落下”。效果如下图 国产免费软件VUP让你轻松成为Vtuber虚拟主播

2.6第三方推流设置

2.6.1OBS设置方法展开

(1)选择捕获源

根据自己的需要,选择“显示器捕获”或“窗口捕获”

国产免费软件VUP让你轻松成为Vtuber虚拟主播

显示器捕捉一般用于挂件玩法,抓取的是整个桌面(如:整个游戏全屏画面)

应用场景:游戏直播,解说向直播(人物放置屏幕一角)

选择“显示器捕捉”后,OBS会自动抓取桌面,如下图

国产免费软件VUP让你轻松成为Vtuber虚拟主播

窗口捕捉

点击【来源】左下角“+”,选择“窗口捕捉”,进入“窗口捕获界面”

如要捕获VUP预览界面:请不要最小化VUPdisplay窗口

在窗口处选择[display.exe]:Display,再点击【确定】即完成VUP预览界面的捕获。如下图

国产免费软件VUP让你轻松成为Vtuber虚拟主播

(2)在直播平台,设置一个直播间,获取rtmp地址,直播码以B站直播间为例操作如下图

国产免费软件VUP让你轻松成为Vtuber虚拟主播

国产免费软件VUP让你轻松成为Vtuber虚拟主播

设置完直播分类,房间标题后,点击【开始直播】此时会弹出直播间的rtmp地址,直播码

国产免费软件VUP让你轻松成为Vtuber虚拟主播

以上,我们已经获取到最关键的rtmp地址,直播码,接下来是对OBS的设置

(3)OBS推流设置

国产免费软件VUP让你轻松成为Vtuber虚拟主播

国产免费软件VUP让你轻松成为Vtuber虚拟主播国产免费软件VUP让你轻松成为Vtuber虚拟主播

国产免费软件VUP让你轻松成为Vtuber虚拟主播

2.6.2Bilibili直播姬设置方法

2.6.2.1登录直播姬设置房间信息(直播分区,直播间名称)

国产免费软件VUP让你轻松成为Vtuber虚拟主播

2.6.2.2直播姬推流设置选择捕获方式

选择捕获方式

根据自己的需要,选择“抓屏捕获”或“窗口捕获”

国产免费软件VUP让你轻松成为Vtuber虚拟主播

(1)抓屏捕获

一般用于挂件玩法,抓取的是整个桌面(如:整个游戏全屏画面)

应用场景:游戏直播,解说向直播(人物放置屏幕一角)

选择“抓屏”后,直播姬会自动抓取桌面,如下图国产免费软件VUP让你轻松成为Vtuber虚拟主播

点击右下角【开始直播】即推流成功,直播间开始直播

(2)窗口捕获

国产免费软件VUP让你轻松成为Vtuber虚拟主播

如要捕获VUP预览界面:请不要最小化VUPdisplay窗口在窗口处选择[display.exe]:Display,再点击【确定】即完成VUP预览界面的捕获。设置完成后,点击右下角【开始直播】即推流成功,直播间开始直播。

久悦文化
  • 本文由 发表于 2020年5月16日13:30:27
  • 原文出自:久悦文化 除非特殊声明,本站文章均为原创,转载请务必保留本文链接.
匿名

发表评论

匿名网友

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: