虚拟偶像 行业分析
虚拟偶像是近年来随着元宇宙一起流行的行业,该词汇最初出现在人们视野时,是用于代指像洛天依、初音未来这类的美少女角色形象,现在虚拟偶像指所有的3D卡通人物形象,他们不以真人实体形式存在的偶像、歌姬,但可以通过专辑、MV、写真集、直播进行偶像活动,是二次元文化的主流。
虚拟动画竞争厂家技术研究
l建模
l动作捕捉
l动画设计
运动/表情捕捉
运动捕捉(Motion capture,简称Mocap)是指一类技术,用于识别客观存在的人体运动,并转换成计算机能理解的格式(例如FBX骨骼动画)。
真人动捕设备
目前3D电影中的非人类角色的主流渲染方法都是通过让演员佩戴昂贵的动作捕捉设备和传感器,来采集一系列动作和表情,真人动捕的优势是高精度,尤其是面部表情,缺点是成本高:需要设备和演员。因此,以卡通形象为主的虚拟偶像行业,一般不需要真人动捕技术。
视频AI动捕
视频动捕技术可以将视频文件直接转成动画格式,无需其他任何输入,因此该技术也让很多动画师自嘲“要失业了”,但由于目前AI图像识别技术尚未成熟,部分动捕软件识别出来的结果不尽如人意,需要后期大量的手动打key来微调,像极了新手甩锅给你的乱工程;此外也有一些产品识别时间过长,只能离线渲染动画,即时渲染是不可能了。
被采样视频的质量直接决定了输出动画的质量,人物视频最好满足以下几点要求,以求最佳的动画效果:
l单人:视频中只有1个人在动,避免出现多人运动。
l全身照:半身照会增加识别难度。
l静态背景:相机尽量别动,否则影响识别。
l紧身衣:避免穿宽大的衣服例如裙子帽子。
l人物转动:视频中暴露出人物的正面、背面、侧面有助于AI的深度感知。
l分辨率:提高视频本身的尺寸、时长、清晰度、人物对比度。
动画师
后期动画制作是离线渲染的一个环节,因此对于直播、游戏之类的场景是不需要动画师的,只有在电影、3D动画片中才需要动画师来参与渲染,但随着AI动作捕捉技术的进步,动画师这个岗位也面临着冲击。
lmaya
l3d max
lblender
相关厂家
lDeepMotion https://www.deepmotion.com/company
l小K动捕 https://xk.yunboai.com/【不支持半身照】
lthreeDposetraker 是一个插件【目前已停止更新】
lMovmi https://getmovmi.com/【速度较慢】
lRADiCAL(getrad.co)【质量不高】
l谷歌 MediaPipe Holistic
谷歌 MediaPipe
https://mediapipe.dev/。MediaPipe是一套开源的,已经训练完成的模型,其中MediaPipe Holistic 为人体设定了 543 个关键点(33 个姿势、21 个手和 468 个人脸关键点),输入一张照片就可以迅速地计算出这五百多个关键点的三维坐标,然后利用这些坐标来控制三维模型运动。
DeepMotion
https://www.deepmotion.com/。DeepMotion算是同类产品中技术实力雄厚,质量较高的一个平台。
小K动捕
https://xk.yunboai.com/。小K是国内的一家轻量级的在线视频动捕网站,很多vTuber作者都在这个平台上录制动画。小K目前免费,质量也不差,但对输入的视频有一定要求。
虚拟歌姬市场调研
【略】