CCF结果提交标准的理解

作者: 云中布衣   分类:  数据比赛    热度: (375℃)   时间: 2015-11-7 19:37   标签: #国科大  #作业    

本次竞赛将根据参赛者提交的预测和实际点击行为进行比较,计算F1-Score,作为一等奖和二等奖的评价标准。F1-Score的计算方法如下:

F=2*P*R/(P+R)

P是准确率,等于 (预测结果与实际相符的有点击行为的用户id数)/(预测结果中有点击行为的用户id数)

R是召回率,等于 (预测结果与实际相符的有点击行为的用户id数)/(实际有点击行为的用户id总数)。

以上用户id数均为各监测点id下用户id数简单求和,不进行跨监测点id去重。(这句话很重要,不进行跨监测点id去重)

此外,本次竞赛特别设立了明略过人奖,用于鼓励参赛者尽量减少提交测试的次数。明略过人奖的评价标准为:(预测结果与实际相符的有点击行为的用户id数/提交测试次数)。即,准确率越高,提交次数越少越好。

仔细的理解下,可以很清楚的明白,F的作用在于防止P,R双方有一方过低。

56.8K

发表评论:

© 云中布衣 2015 | Driven by EMLOG  | SiteMap | RunTime: 9.33ms&RSS  |   | 回到顶部

文章数量【230】 评论数量【156】 稳定运行【1033天】

Visitor IP Address【54.81.183.183】