一般来说,比较成熟的竞赛榜单分为两种,一种是公共榜单,一种是最后的私有榜单。
对应的数据也不相同,分为验证集和测试集。
这两部分数据的真实答案都不会公布出去,但在参赛者提交结果之后,公共榜单只会公布验证集部分的结果供大家参考,而不会公布最终测试集上的结果和内容。
这是因为实时的榜单排名只是为了帮助大家理解自己的算法大概在什么水平,和最强的算法差了多少。虽然没有直接提供答案,但是如果参赛者调整设置反复提交结果,还是可以一定程度上分析到这部分数据的内容和分布的。
故而,这部分数据只做参考之用,最终决定排名的只有测试集的那部分。因此赛事的公共榜单只能一定程度上反应问题,没法百分之百地表示最终的名次。
“虽说有的赛时榜单根本不用于最后的排名,但人们却很容易被这种榜单的魔力所吸引。”孟繁岐想起后世和唐璜参加过两次小型比赛,不知道为什么整天就想盯着那个榜单使劲看。
自己的提交成绩高了一名,低了一名都会引起心情的巨大波动。
“什么行业都是这样的,你看什么行业,影视剧行业,明星行业。创造焦虑嘛。”唐璜不以为然,