initialneil / SplattingAvatar

[CVPR2024] Official implementation of SplattingAvatar.
Other
406 stars 39 forks source link

male-3-casual的pose文件夹怎样得到? #35

Open hanyuqi-cloud opened 3 months ago

hanyuqi-cloud commented 3 months ago

我看到male-3-casual的pose文件夹中的npz文件

import numpy as np data=np.load('/docker-ssd/pytorch3d/SplattingAvatar/trainData/peoplesnapshot/male-3-casual/poses/anim_nerf_train.npz') data.files ['betas', 'global_orient', 'body_pose', 'transl'] data['body_pose'] array([[ 0.02380491, 0.07599936, 0.00609047, ..., 0.12100294, -0.03039126, 0.01613187], [ 0.02711988, 0.07382655, 0.00768738, ..., 0.11201192, -0.0076589 , 0.0012156 ], [ 0.02834096, 0.07907014, 0.00928598, ..., 0.1393899 , -0.00987694, -0.0046205 ], ..., [-0.11159559, 0.01711641, 0.04577104, ..., 0.00832501, -0.00741003, 0.07787313], [-0.13125624, 0.11833489, 0.02576347, ..., 0.0623776 , 0.02813122, 0.03640281], [-0.07356066, 0.12401126, 0.00806803, ..., 0.01667619, 0.02996102, 0.0459439 ]], dtype=float32)

最后的这些数字不是0,这意味着有手部的姿势对吗?可是male-3-casual的pose.npz文件不包含手部姿势,所以这些手部姿势数据是怎么来的呢?有没有大佬可以解答一下,感谢

choos11 commented 2 months ago

我也有同样的问题,这个精细化的参数是怎么来的

hanyuqi-cloud commented 2 months ago

我也有同样的问题,这个精细化的参数是怎么来的

现在我使用的是InstantAvatar得到的pose,或者使用smplify-x得到smplx的pose

hanyuqi-cloud commented 2 months ago

我在github上回复你了,我主要使用了InstantAvatar做smpl pose

---原始邮件--- 发件人: @.> 发送时间: 2024年7月22日(周一) 下午3:27 收件人: @.>; 抄送: @.**@.>; 主题: Re: [initialneil/SplattingAvatar] male-3-casual的pose文件夹怎样得到? (Issue #35)

我也有同样的问题,这个精细化的参数是怎么来的

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

choos11 commented 2 months ago

我把snapshot的pose转换成smpl-x的pose.npz跑了下,但是效果不好,请问你的效果怎么样呢

hanyuqi-cloud commented 2 months ago

我把snapshot的pose转换成smpl-x的pose.npz跑了下,但是效果不好,请问你的效果怎么样呢

我只用了peoplesnapshot的smpl pose,但是我自己的dataset使用的是smplx,效果很好,手部都很清晰

choos11 commented 2 months ago

我把snapshot的pose转换成smpl-x的pose.npz跑了下,但是效果不好,请问你的效果怎么样呢

我只用了peoplesnapshot的smpl pose,但是我自己的dataset使用的是smplx,效果很好,手部都很清晰

好的,谢谢

choos11 commented 2 months ago

00351 我刚才用smpl的snapshot的pose试了一遍,最好也是这种效果,我用的这个是female-7-plaza,没有作者给的精细化参数,请问你训练用了精细化参数吗

hanyuqi-cloud commented 2 months ago

smpl做到最好也就基本是这样了,我加了一个loss,是lpip的loss,没有调别的参数

choos11 commented 2 months ago

好的,谢谢您,请问怎么给提问者或者是作者发邮件,这个功能还挺好用的。

------------------ 原始邮件 ------------------ 发件人: "initialneil/SplattingAvatar" @.>; 发送时间: 2024年7月24日(星期三) 上午9:26 @.>; @.**@.>; 主题: Re: [initialneil/SplattingAvatar] male-3-casual的pose文件夹怎样得到? (Issue #35)

smpl做到最好也就基本是这样了,我加了一个loss,是lpip的loss,没有调别的参数

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>

SFGHRT commented 2 months ago

我把snapshot的pose转换成smpl-x的pose.npz跑了下,但是效果不好,请问你的效果怎么样呢

我只用了peoplesnapshot的smpl pose,但是我自己的dataset使用的是smplx,效果很好,手部都很清晰

你好,我直接用snapshotl里面的pose.npz,跑出来的效果很不理想,是因为pose不准确吗?那么这个精细化的pose可以用instantavatar得到吗?