DownOL 软件仓库– 软件下载,字节世界与新知

一部 iPhone 搞定全身动态捕捉!Michicon – VisionPose Single3D –

发表于:2024-04-26 作者:创始人
编辑最后更新 2024年04月26日,以前说到动态捕捉( Motion Capture ),会让人想到在个大房间里穿上贴了很多小圆球的紧身衣,用多部摄影机和大型电脑来进行,不过今时今日,在 AI 的加持,和日本 VTuber 热潮的推动下

以前说到动态捕捉( Motion Capture ),会让人想到在个大房间里穿上贴了很多小圆球的紧身衣,用多部摄影机和大型电脑来进行,不过今时今日,在 AI 的加持,和日本 VTuber 热潮的推动下,全身动态捕捉已是只要有一部 iPhone 就搞定的事情。日本最近就出了这样的免费动态捕捉 App Michicon - VisionPose Single3D - 。

《 Michicon 》是运用由 Next-System 开发的动态捕捉技术 VisionPose Single3D 来开发的手机程式。 VisionPose 技术只要透过廉价的 WebCam 就能实时同时捕捉多个人的骨格深度资料,它透过 AI 来进行推论分析,可以运用在顾客动态、医学分析、保安监控和娱乐制作等范畴。

VisionPose 是运用 AI 透过 Webcam 来进行动态捕捉的技术

《 Michicon 》就是运用这技术,将镜头捕捉到的人的骨架资料,实时套用到软件里的虚拟角色 Michiko 身上,由于动态捕捉是在手机里进行,需要一定的处理能力,所以开发商推荐使用 iPhone Xs 、 Xs Max 和 XR 这三款采用 A12 Bionic 处理器的手机。而针对影像制作,软件还备有绿幕功能,方便将角色套在其他场景上。

只要用手机镜头就能进行动态捕捉,不需要特别的感测器。

还有方便影像合成的绿幕功能

笔者试过这个软件,发现捕捉骨格的速度相当快,而且不使用云端服务器,即使是飞行模式也能用到。基本上只要镜头照到身体大部分做大动作,都能准确捕捉。不过一些具有深度的动态,例如向前踢脚、直伸手掌档著身体一部分等动作,准确度就会开始下跌,但效果已相当好。

不过可能这软件仍在早期阶段,用家现时只能够透过 iPhone 的屏幕录影功能将角色的动态录下来,放到影片剪接软件里加工。开发商表示,今后还会加入更换及制作角色、更换背景、储存动作数据和上半身动态捕捉等功能。

现时日本正兴起一遍 VTuber 热,相关的技术如 VRM 规格、角色制作、直播和收看软件等都急速发展, VTuber 将来又会利用手机全身动态捕捉技术来制作什么新搞作呢?

下载《Michicon - VisionPose Single3D -》 iOS 版:按此

标签 Michicon, Next-System, VisionPose Single3D, VTuber, 动态捕捉
分类 手机, 流动应用

相关文章

阅览更多流动应用
2022-05-09 13:59:45
0