【一】如何快速使用视频生成MMD运动数据

您所在的位置:网站首页 mmd格斗动作数据 【一】如何快速使用视频生成MMD运动数据

【一】如何快速使用视频生成MMD运动数据

2023-11-21 11:51| 来源: 网络整理| 查看: 265

   以前一直想做一些日常的小段片,苦于K帧技术太烂外加工作繁忙,经常做着做着就流产了,于是就一直再找相关的资料,其实去年就有一点眉目了,但是一直没精力去弄,幸好,有很多同道中人,好了,闲话到此为止。

   1.MMD跟踪自动的作者不是我,我只是代码的搬运工与传播者,这是由一群在mmd的爱好者共同开发的,目前主要由miu200521358这位日本网友整合在一起,代码全部在github上,只要遵循其使用规则即可使用,禁止商业用途,禁止对视频源作者带来困扰,使用尽量遵循https://ch.nicovideo.jp/miu200521358/blomaga/ar1686913 所述

2.如何快速使用

(1)首先,你需要一台能上网的设备,不能上网的,我下一篇会讲另外一种比较麻烦的本地方式。然后你需要一个google账号,开通google硬盘等服务。

(2)打开 https://qiita.com/miu200521358/items/fb0a7bcf2764d7797e26 这个网站,这里有作者给出的使用google colab远程搭建的环境的脚本,如下所示:

导入篇,就是教你如何使用脚本,实行篇直接执行自动生成VMD文件

推荐使用日文,英文有点不完整,作者这里写的很详细,我就不累赘了,大家对着翻译慢慢看还是很好懂得。

(3)注意事项:

      1.因为整个环境部署在google colab免费的云服务器上,所以每次第一次执行脚本都相当于重新搭建环境,非常耗时,大约2个小时左右(关键是编译耗时),并且30分钟不操作也会导致环境自动注销,所以建议,最好一次性多准备几个素材,这样就不会经常空等。

      2.首先要google云硬盘的根目录下,新建立目录autotrace,并视频上传进去,如下所示:

    3.执行脚本前,不要手动装载硬盘,否则会导致盘符错误,脚本找不到视频,然后导致失败,脚本自动会装载硬盘,但是需要我们手动验证,否则会一直卡在这里,如下就是硬盘转载错误,执行箭头变红表示出错了。

如果执行出现装载错误,返回导入篇脚本,按图中,重新装载即可。

4.自动产生的动作数据,存放于图中所示路径,默认使用miku的骨骼,所以前缀是miku,如果需要更改骨骼,可以自行修改(当然是有坑的啦),多人动作会出现idx01,id0x2等等,每个文件夹代表一个动作

总的来说,快速部署,优点就是基本不需要你电脑要什么配置,以及安装什么软件,只要你的电脑能够上网就行,一键式傻瓜安装,而且google colab服务器的默认配置GPU是16GB,RAM是12GB,硬盘是400GB,性能比一般的计算机要好很多,关键是免费,所以有兴趣的可以去研究一下。

缺点也很明显,因为免费,所以google服务器必须及时释放资源,所以每一次使用都需要重新安装,后续我看大家要求,如果有必要的话,我会直接把程序移入云硬盘中,省去大家编译下载的时间,这里只是个演示,当然我更喜欢直接安装在本地进行调试修改。

最后,我最近也从errno-mmd大佬上找到了表情识别,至于手势识别,虽然miu200521358大佬有找过相应的资料,但是并没有具体实现,可能是手指骨骼太多,导致复杂度太高把。

目前MMD跟踪自动化使用的识别方式为18个关键骨骼点,后续会废弃掉。

COCO模式目前openpost1.5.0使用的是boby25

新的骨骼模式,明显比旧的模式要好很多,所以,旧的模式脚尖是不可移动的,我们还在继续进步中。

对于Unity软件,这里需要注明一下,可以直接使用动作追踪,openpose已推出Unity的插件,可以直接进行动作跟踪,无需其他任何东西,并且支持镜头移动,参考视频如下:https://www.youtube.com/watch?v=Jrcak4n6PG4&feature=youtu.be

最新的自动跟踪,大家可以关注一下

https://github.com/CMU-Perceptual-Computing-Lab/openpose

https://github.com/errno-mmd

https://github.com/miu200521358

如果大家对本地安装有需求,我也可以再写一篇,需求不大的话,就自己找找资料去吧,或者参照一下OpenMMD的教程,里面虽然不是最新的,但是可以应付一下,如果真的有需要我也可以再写一份,我这个咸鱼鸽子,两年终于200粉了,感动啊。。。。

有问题,请在下面提问,线上云版,不需要怎么调节参数,直接使用,应该也没啥问题。



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3