ShuweiShao / AF-SfMLearner

[MedIA2022 & ICRA2021] Self-Supervised Monocular Depth and Ego-Motion Estimation in Endoscopy: Appearance Flow to the Rescue
MIT License
101 stars 15 forks source link

Why are the four corners of the predicted depth map black? #12

Closed lby53 closed 2 years ago

lby53 commented 2 years ago

Why are the four corners of the predicted depth map black?

image

ShuweiShao commented 2 years ago

Is there any resize when entering the network? The resolution of the network training is 256x320.

lby53 commented 2 years ago

您好,我是将options.py中的height和width都改成了自己数据集的图片宽高320,320,请问您的网络训练的分辨率必须定为256x320,使用时我需要将自己的数据集resize成该分辨率吗?

------------------ 原始邮件 ------------------ 发件人: "ShuweiShao/AF-SfMLearner" @.>; 发送时间: 2022年10月26日(星期三) 上午9:34 @.>; @.**@.>; 主题: Re: [ShuweiShao/AF-SfMLearner] Why are the four corners of the predicted depth map black? (Issue #12)

请问输入网络的时候有没有resize呢?网络训练的分辨率是256x320

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

ShuweiShao commented 2 years ago

您也可以自己训练一个网络,使用什么分辨率训练,最好使用什么分辨率测试,如果是加载给的模型,256x320的分辨率测试是最好的,代码里有resize函数,只需要将options里的参数改下就可以。

lby53 commented 2 years ago

您好,我就是以320x320的图片作为输入自己训练的,训练加载了预训练模型,我是不是应该选择从头开始训练的方式。然后之前选择从头开始训练,不知道是数据量不够(12000张图片)或是epoch较少(30),预测出的深度图全是黄色。

------------------ 原始邮件 ------------------ 发件人: "ShuweiShao/AF-SfMLearner" @.>; 发送时间: 2022年10月26日(星期三) 上午9:50 @.>; @.**@.>; 主题: Re: [ShuweiShao/AF-SfMLearner] Why are the four corners of the predicted depth map black? (Issue #12)

您也可以自己训练一个网络,使用什么分辨率训练,最好使用什么分辨率测试,如果是加载给的模型,256x320的分辨率测试是最好的,代码里有resize函数,只需要将options里的参数改下就可以。

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

ShuweiShao commented 2 years ago

可以试试从头训,感觉12000张图片和30个epoch应该是够的,内参记得改一下。

lby53 commented 2 years ago

好的,对于内窥镜鱼眼镜头拍摄的图片,是不是应该畸变校正后作为输入进行训练会更好。

------------------ 原始邮件 ------------------ 发件人: "ShuweiShao/AF-SfMLearner" @.>; 发送时间: 2022年10月27日(星期四) 上午9:48 @.>; @.**@.>; 主题: Re: [ShuweiShao/AF-SfMLearner] Why are the four corners of the predicted depth map black? (Issue #12)

可以试试从头训,感觉12000张图片和30个epoch应该是够的,内参记得改一下。

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

ShuweiShao commented 2 years ago

您好,鱼眼镜头我没有测试过,您可以自己测试下。