F1-Measure

news/2024/11/25 16:25:31/


转自:http://www.cnblogs.com/sky-zw/p/3600250.html

准确率(Precision)、召回率(Recall)以及综合评价指标(F1-Measure)

在信息检索和自然语言处理中经常会使用这些参数,下面简单介绍如下:

准确率与召回率(Precision & Recall)

我们先看下面这张图来加深对概念的理解,然后再具体分析。其中,用P代表Precision,R代表Recall

一般来说,Precision 就是检索出来的条目中(比如:文档、网页等)有多少是准确的,Recall就是所有准确的条目有多少被检索出来了。

 

下面这张表介绍了True Positive,False Negative等常见的概念,P和R也往往和它们联系起来。

  Relevant NonRelevant
Retrieved true positives (tp) false positives(fp)
Not Retrieved false negatives(fn) true negatives (tn)

那么,

 P=\frac{tp} {tp+fp} \hfill (1)

 R=\frac{tp} {tp+fn} \hfill (2)

 

我们当然希望检索的结果P越高越好,R也越高越好,但事实上这两者在某些情况下是矛盾。比如极端情况下,我们只搜出了一个结果,且是准确的,那么P就是100%,但是R就很低(tp==1,fp==0,fn很大,tn==0);而如果我们把所有结果都返回(全部都检索到了,不过检索到不相关的也有很多,即fp很大,fn==0),那么必然R是100%,但是P很低。

因此在不同的场合中需要自己判断希望P比较高还是R比较高。如果是做实验研究,可以绘制Precision-Recall曲线来帮助分析。

 

F1-Measure

前面已经讲了,P和R指标有的时候是矛盾的,那么有没有办法综合考虑他们呢?我想方法肯定是有很多的,最常见的方法应该就是F-Measure了,有些地方也叫做F-Score,其实都是一样的。

F-Measure是Precision和Recall加权调和平均:

 F = \frac{(a^2+1)P*R} {a^2(P+R)} \hfill (3)

当参数a=1时,就是最常见的F1了:

 F1 = \frac{2PR} {P+R} \hfill (4)

很容易理解,F1综合了P和R的结果,当F1较高时则比较说明实验方法比较理想。



http://www.ppmy.cn/news/378766.html

相关文章

第十七届全国大学智能汽车竞赛竞速比赛规则

(版本:2022-6-21) 00 规则导读 参加过往届比赛的队员可以通过下面内容了解第十七届竞赛规则主要变化。如果第一次参加比赛,建议对于本文进行全文阅读。 竞速比赛共分为九个组别,每个组别在比赛环境、比赛任务、单片机平…

【JVM系列】jvm内存结构详解

文章目录 前言HotSpot VM介绍内存结构程序计数器JVM栈本地方法栈Java堆方法区运行时常量池 永久代和元空间永久代(PermGen)元空间(Metaspace) 直接内存总结 前言 我们为什么要学习JVM? 面试的需要中高级程序员的必备技…

F1赛车比赛排名问题(oj)

话不多说,直奔主题。 1.要解决同一个人不同场比赛的得分与名次累计; 2.要解决两种排名方式所对应的排序方法;(sort函数与cmp定义相配合) 题中可得 第一场:apple 25; banana 18 ; pear 15 第二场&#xff1…

F1方程式冠军

【问题描述】 一级方程式F1锦标赛由一系列称为大奖赛的分站赛组成。每一场比赛的车手都根据他们的最后位置获得积分。只有前10名车手按以下顺序获得分数:25、18、15、12、10、8、6、4、2、1。在锦标赛结束时,得分最多的车手是冠军。如果有平分&#xff0…

模拟车辆行驶

在PhysX中提供了模拟各种车辆行驶的接口。一些车辆运动的物理参数都可以通过该物理引擎设置后模拟现实中的车辆行驶。 首先会用到一个车辆的描述器VehiclDesc,它就像一个总的指挥长,负责整个车辆的运作。 1. 自身的物理特性,如车辆在…

1.2 最佳赛车问题

1.2 最佳赛车问题 题目描述 四名专家对四款赛车进行评论。 专家A说:2号赛车是最好的。 专家B说:4号赛车是最好的。 专家C说:3号不是最佳赛车。 专家D说:专家B说错了。 事实上只有一款赛车最佳,且只有一名专家说对了&a…

模拟赛车torcs配置

在TORCS中,所有选项都存储在一组XML配置文件中(每种种族模式一种)。 在Linux配置文件被创建之前,游戏第一次启动,并位于$ HOME / .torcs / config / raceman /,其中$ HOME是您的主目录。 在Windows下&#…

基于大学生方程式赛车的车速测量与数据显示

基于大学生方程式赛车的车速测量与数据显示 一、设计背景 ​ 根据调查显示,越来越多的车队已经或有意向使用多电机作为赛车的驱动方式。因此赛车各驱动轮的扭矩分配就显得相当重要,从而需要精准地测量出赛车在各个状态的车速。 二、设计目标 ​ 能够实…