我对你们的工作很感兴趣!我借用了你们的项目尝试了下现在流行的一些多模态表征融入的方法。我发现加入了这些方法之后,在验证集上的效果都比不加多模态表征的情况要好,但是在测试集上却大大不如验证集。我看了下github issue。如果都是3:1:1取的,难道在验证集和测试集的效果应该差不多吗?还是说测试集上没有多模态的表征但是验证集上有,所以才导致了这种情况?
我对你们的工作很感兴趣!我借用了你们的项目尝试了下现在流行的一些多模态表征融入的方法。我发现加入了这些方法之后,在验证集上的效果都比不加多模态表征的情况要好,但是在测试集上却大大不如验证集。我看了下github issue。如果都是3:1:1取的,难道在验证集和测试集的效果应该差不多吗?还是说测试集上没有多模态的表征但是验证集上有,所以才导致了这种情况?