作者@xy-guo您好，想请教您关于kitti评估的相关问题~~~

[tjutzdd]

作者您好，原谅我使用汉语请教您，（我英文水平太菜了）。 1、对于SceneFlow数据集的评估，普遍都使用EPE（也就是MAE）作为评估标准，而且代码里也可以实现评估函数进行评估。 2、对于KITTI2012数据集，评价标准有Noc和Occ（All）的>2px, >3px, >4px, >5px以及Mean Error的错误率和错误像素数的评估，这些评估都是需要在自己代码里面实现它们的函数吗？还是需要提交到KITTI官网上生成评测结果呢？ 3、对于KITTI2015数据集，评价标准里有All（Occ）和Noc的D1-bg，D1-fg，D1-all的错误率评估，需要自己在代码里面实现评估函数吗，还是必须提交到KITTI官网上评测结果呢？ 4、对于kitti12来说，所以的评估标准可以自己代码实现；但是对于kitti2015来说，自己无法实现评价代码，D1-bg，D1-fg，D1-all这些怎么实现？ 5、而且发论文的话，KITTI12和15的实验数据必须来自kitti的官方网站吗？ 对于以上问题，目前还是比较迷惑的，kitti网站好像说是不能用于调试程序，每个人只能在规定时间内提交一次把，也不能申请多个账号吧。 所以对于这些评价标准的问题，还望作者大佬您能在百忙中抽出时间不吝赐教，万分感谢！！！~~~~~~~~~~小白先行谢过！！！！！！！

[lumeihe]

作者您好，原谅我使用汉语请教您，（我英文水平太菜了）。 1、对于SceneFlow数据集的评估，普遍都使用EPE（也就是MAE）作为评估标准，而且代码里也可以实现评估函数进行评估。 2、对于KITTI2012数据集，评价标准有Noc和Occ（All）的>2px, >3px, >4px, >5px以及Mean Error的错误率和错误像素数的评估，这些评估都是需要在自己代码里面实现它们的函数吗？还是需要提交到KITTI官网上生成评测结果呢？ 3、对于KITTI2015数据集，评价标准里有All（Occ）和Noc的D1-bg，D1-fg，D1-all的错误率评估，需要自己在代码里面实现评估函数吗，还是必须提交到KITTI官网上评测结果呢？ 4、对于kitti12来说，所以的评估标准可以自己代码实现；但是对于kitti2015来说，自己无法实现评价代码，D1-bg，D1-fg，D1-all这些怎么实现？ 5、而且发论文的话，KITTI12和15的实验数据必须来自kitti的官方网站吗？ 对于以上问题，目前还是比较迷惑的，kitti网站好像说是不能用于调试程序，每个人只能在规定时间内提交一次把，也不能申请多个账号吧。 所以对于这些评价标准的问题，还望作者大佬您能在百忙中抽出时间不吝赐教，万分感谢！！！~~~~~~~~~~小白先行谢过！！！！！！！

目前有同样的问题？请问您解决了吗？能否加qq交流一下？

[jiegejiegejiege]

作者您好，原谅我使用汉语请教您，（我英文水平太菜了）。 1、对于SceneFlow数据集的评估，普遍都使用EPE（也就是MAE）作为评估标准，而且代码里也可以实现评估函数进行评估。 2、对于KITTI2012数据集，评价标准有Noc和Occ（All）的>2px, >3px, >4px, >5px以及Mean Error的错误率和错误像素数的评估，这些评估都是需要在自己代码里面实现它们的函数吗？还是需要提交到KITTI官网上生成评测结果呢？ 3、对于KITTI2015数据集，评价标准里有All（Occ）和Noc的D1-bg，D1-fg，D1-all的错误率评估，需要自己在代码里面实现评估函数吗，还是必须提交到KITTI官网上评测结果呢？ 4、对于kitti12来说，所以的评估标准可以自己代码实现；但是对于kitti2015来说，自己无法实现评价代码，D1-bg，D1-fg，D1-all这些怎么实现？ 5、而且发论文的话，KITTI12和15的实验数据必须来自kitti的官方网站吗？ 对于以上问题，目前还是比较迷惑的，kitti网站好像说是不能用于调试程序，每个人只能在规定时间内提交一次把，也不能申请多个账号吧。 所以对于这些评价标准的问题，还望作者大佬您能在百忙中抽出时间不吝赐教，万分感谢！！！~~~~~~~~~~小白先行谢过！！！！！！！

目前有同样的问题？请问您解决了吗？能否加qq交流一下？

你好，目前，我也有同样的问题？请问您解决了吗？可以加qq交流一下吗？

[Lilyingying]

同样疑惑，+1