验证集指标问题

[gejutaixiao22]

作者您好，我再尝试更改您的网络结构并在跑模型的时候，发现验证集指标略高一点的时候测试出来的结果并没有和验证集相同，Outdoor_Rain数据集大概差了0.3左右，请问这是正常现象么。再者您在训练的时候训练了多少epoch呢？谢谢

[sunshangquan]

Hi @gejutaixiao22 , 谢谢您的关注，验证的时候为了时间考虑，在这里添加了一个early stop，就是只验证了验证集的前60张图片的结果，所以测试的时候会有一些差别，不过验证和测试的总体趋势应该是一样的；训练了一共300000个iteration

[xiaoshuai0719]

Hello author, I would like to ask if the 60 validation results mentioned here refer to the models generated every 1000 iterations during our training process when running test.py, and that we use test_histoformer to calculate and manually select the best model (best.pth)?

[sunshangquan]

Hi @xiaoshuai0719, yes.

[hhhhhhalf]

作者您好！您论文中提到的在"RainDrop 测试数据集"上进行指标评估，我发现RainDrop官方数据集上有'testA”和‘’testB"两个测试集，请问您是使用testA用于训练时的val，最终测试指标是在testb数据集上吗？

[sunshangquan]

Hi @hhhhhhalf ，指标用的是testa集，b这个集不用做数值比较

[hhhhhhalf]

Hi @hhhhhhalf ，指标用的是testa集，b这个集不用做数值比较

好嘞！感谢您的解答！