NYUD、MultiCue数据集

[freeah]

您好，我想问下，这两个数据集计算ODS、OIS、AP的方法我没找到，在issues里面也没找到对应答案，这两个数据集要如何计算？是使用BSDS 500的基准计算吗？

[yun-liu]

是的，在这里https://www2.eecs.berkeley.edu/Research/Projects/CS/vision/grouping/resources.html， 下载的数据集里会有评测代码

[dapeng2017]

想问下，您论文中MUlticue的结果是用的哪个模型生成的呢？您的结果方便发一下么？

[rrryan2016]

是的，在这里https://www2.eecs.berkeley.edu/Research/Projects/CS/vision/grouping/resources.html， 下载的数据集里会有评测代码

您好，

这个链接已经失效了，所以我还是没有太了解在nyud和multicue数据集上评估模型的方法。我最近也在nyud数据集上训练模型，但是一直找不到nyud数据集提供的test set的ground truth，所以也无从下手评估nyud数据集上的结果。

按照您上面的回答，您的意思是不是说：模型在数据集nyud和multicue上的performance，是由 在nyud和multicue上训练好的模型 在BSDS500上边缘预测结果的evaluation 所确定的？

您RCF论文中的Fig. 11是不是按照上面的流程做的？

打扰了，先行谢过。

[rrryan2016]

是的，在这里https://www2.eecs.berkeley.edu/Research/Projects/CS/vision/grouping/resources.html， 下载的数据集里会有评测代码

您好，

这个链接已经失效了，所以我还是没有太了解在nyud和multicue数据集上评估模型的方法。我最近也在nyud数据集上训练模型，但是一直找不到nyud数据集提供的test set的ground truth，所以也无从下手评估nyud数据集上的结果。

按照您上面的回答，您的意思是不是说：模型在数据集nyud和multicue上的performance，是由 在nyud和multicue上训练好的模型 在BSDS500上边缘预测结果的evaluation 所确定的？

您RCF论文中的Fig. 11是不是按照上面的流程做的？

打扰了，先行谢过。

不好意思，是我理解错了。

我在您的其他回答中看到提供的NYUD的测试集的GT了。

谢谢了。

[yun-liu]

@rrryan2016 没事

[dinnodinosaur]

你好，我找不到作者提供的NYUD的测试集的GT，作者提供的NYUD的数据集中没有找到测试集的GT，能发下NYUD的测试集的GT的链接吗

[yun-liu]

@dinnodinosaur #87

[pu-1]

是的，在这里https://www2.eecs.berkeley.edu/Research/Projects/CS/vision/grouping/resources.html， 下载的数据集里会有评测代码

您好，

这个链接已经失效了，所以我还是没有太了解在nyud和multicue数据集上评估模型的方法。我最近也在nyud数据集上训练模型，但是一直找不到nyud数据集提供的test set的ground truth，所以也无从下手评估nyud数据集上的结果。

按照您上面的回答，您的意思是不是说：模型在数据集nyud和multicue上的performance，是由 在nyud和multicue上训练好的模型 在BSDS500上边缘预测结果的evaluation 所确定的？

您RCF论文中的Fig. 11是不是按照上面的流程做的？

打扰了，先行谢过。

你好，请问你解决在multicue上评估这个问题了吗，能否提供解决方案，谢谢你。

[sfg-oss]

你好，能问下除了BSDS数据集其他怎么评测啊，还是用matlab评价吗，没看到其他的相关mat文件，需要自己生成吗

[yun-liu]

@sfg-oss 还是用BSDS500提供的matlab代码，手动把其他数据的png格式的ground truth保存成和BSDS一样的mat格式即可。保存mat文件额时候，只需要考虑Boundaries，不需要考虑Segmentation（建议仔细阅读matlab评测代码）。