加入STN矫正模块后精度变得很低

j-river / svtr-pytorch

pytorch version of svtr model

19 stars 3 forks source link

Open willpat1213 opened 1 year ago

willpat1213 commented 1 year ago

在搭建完模型后，跑了几组实验情况如下，STN表示加了STN矫正模块的表现；w/oSTN表示不加矫正模块时的表现。

请问一下问题可能出在哪里呢？相关设置均对齐了paddlepaddle。

j-river commented 1 year ago

论文里好像是没有使用stn。你可能需要去验证一下加入的stn是否达到了预期的矫正效果，如果不可控的话，反而容易降低准确率

willpat1213 commented 1 year ago

论文里面使用了的 1665559571836

j-river commented 1 year ago

欧欧，我没注意到这一块的内容，估计你得去paddleOCR里去看一下相关的实现细节，或者提个issue。

vance-coder commented 1 year ago

在搭建完模型后，跑了几组实验情况如下，STN表示加了STN矫正模块的表现；w/oSTN表示不加矫正模块时的表现。

请问一下问题可能出在哪里呢？相关设置均对齐了paddlepaddle。

请问下，目前对这个实验还有什么发现嘛？我发现有时候svtr识别会忽然漏那么一两个字符，不知道是不是这个STN模块的影响，还有对于字符较长文字识别效果奇差（我定义的字符长度是够的）