Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

male-3-casual的pose文件夹怎样得到? #35

Open
hanyuqi-cloud opened this issue Jun 18, 2024 · 11 comments
Open

male-3-casual的pose文件夹怎样得到? #35

hanyuqi-cloud opened this issue Jun 18, 2024 · 11 comments

Comments

@hanyuqi-cloud
Copy link

我看到male-3-casual的pose文件夹中的npz文件

import numpy as np
data=np.load('/docker-ssd/pytorch3d/SplattingAvatar/trainData/peoplesnapshot/male-3-casual/poses/anim_nerf_train.npz')
data.files
['betas', 'global_orient', 'body_pose', 'transl']
data['body_pose']
array([[ 0.02380491, 0.07599936, 0.00609047, ..., 0.12100294,
-0.03039126, 0.01613187],
[ 0.02711988, 0.07382655, 0.00768738, ..., 0.11201192,
-0.0076589 , 0.0012156 ],
[ 0.02834096, 0.07907014, 0.00928598, ..., 0.1393899 ,
-0.00987694, -0.0046205 ],
...,
[-0.11159559, 0.01711641, 0.04577104, ..., 0.00832501,
-0.00741003, 0.07787313],
[-0.13125624, 0.11833489, 0.02576347, ..., 0.0623776 ,
0.02813122, 0.03640281],
[-0.07356066, 0.12401126, 0.00806803, ..., 0.01667619,
0.02996102, 0.0459439 ]], dtype=float32)

最后的这些数字不是0,这意味着有手部的姿势对吗?可是male-3-casual的pose.npz文件不包含手部姿势,所以这些手部姿势数据是怎么来的呢?有没有大佬可以解答一下,感谢

@choos11
Copy link

choos11 commented Jul 22, 2024

我也有同样的问题,这个精细化的参数是怎么来的

@hanyuqi-cloud
Copy link
Author

我也有同样的问题,这个精细化的参数是怎么来的

现在我使用的是InstantAvatar得到的pose,或者使用smplify-x得到smplx的pose

@hanyuqi-cloud
Copy link
Author

hanyuqi-cloud commented Jul 22, 2024 via email

@choos11
Copy link

choos11 commented Jul 22, 2024

我把snapshot的pose转换成smpl-x的pose.npz跑了下,但是效果不好,请问你的效果怎么样呢

@hanyuqi-cloud
Copy link
Author

我把snapshot的pose转换成smpl-x的pose.npz跑了下,但是效果不好,请问你的效果怎么样呢

我只用了peoplesnapshot的smpl pose,但是我自己的dataset使用的是smplx,效果很好,手部都很清晰

@choos11
Copy link

choos11 commented Jul 22, 2024

我把snapshot的pose转换成smpl-x的pose.npz跑了下,但是效果不好,请问你的效果怎么样呢

我只用了peoplesnapshot的smpl pose,但是我自己的dataset使用的是smplx,效果很好,手部都很清晰

好的,谢谢

@choos11
Copy link

choos11 commented Jul 22, 2024

00351
我刚才用smpl的snapshot的pose试了一遍,最好也是这种效果,我用的这个是female-7-plaza,没有作者给的精细化参数,请问你训练用了精细化参数吗

@hanyuqi-cloud
Copy link
Author

smpl做到最好也就基本是这样了,我加了一个loss,是lpip的loss,没有调别的参数

@choos11
Copy link

choos11 commented Jul 25, 2024 via email

@SFGHRT
Copy link

SFGHRT commented Jul 27, 2024

我把snapshot的pose转换成smpl-x的pose.npz跑了下,但是效果不好,请问你的效果怎么样呢

我只用了peoplesnapshot的smpl pose,但是我自己的dataset使用的是smplx,效果很好,手部都很清晰

你好,我直接用snapshotl里面的pose.npz,跑出来的效果很不理想,是因为pose不准确吗?那么这个精细化的pose可以用instantavatar得到吗?

@chongyaaa
Copy link

smpl做到最好了基本就是这样了,我加了一个loss,是lpip的loss,没有调节其他参数

你好,请问下你这边是使用smplify-x 获取的smplx参数,然后转成smpl 放到splattingavatar进行训练的么?

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

4 participants