Average Precision

forkortelse for AP

Average Precision (AP) er et mål for præcisionen af en model over alle recall-niveauer, ofte brugt i informationssøgning og objektdetektion.

Kort fortalt

Kort fortalt: Average Precision fortæller, hvor god en model er til at rangere relevante resultater højt – jo højere AP, jo bedre.

Kategori
metrik
Niveau
øvet

Betydninger

1
  1. 1

    Average Precision (AP) er en metrik, der opsummerer precision-recall-kurven ved at beregne den gennemsnitlige præcision for alle relevante dokumenter i en rangliste. Den giver et enkelt tal, der afspejler både præcision og recall.

    • I en informationssøgningsopgave med 5 relevante dokumenter blev AP beregnet til 0,85.Eksempel
    • I objektdetektion bruges mAP (mean Average Precision) over flere klasser som standardevalueringsmetrik i COCO-datasættet.COCO evaluation

Hvornår bruges det

AP bruges typisk til at evaluere rangering i informationssøgning (f.eks. søgemaskiner) og i objektdetektion som mAP (mean Average Precision). Det beregnes som arealet under precision-recall-kurven.

Formel

AP = (1/|R|) ∑_{k=1}^{n} P(k) · rel(k), hvor |R| er antal relevante elementer, P(k) er præcision ved cutoff k, og rel(k) er 1 hvis elementet er relevant, ellers 0.

Oprindelse

Begrebet stammer fra informationssøgning i midten af 1900-tallet og blev formaliseret gennem TREC-evalueringerne.

Afledte ord

2

Kilder

2
  • The PASCAL Visual Object Classes (VOC) Challenge
  • Salton, G., & McGill, M. J. (1983). Introduction to Modern Information Retrieval.