middel gennemsnitlig præcision

Middel gennemsnitlig præcision (MAP) er en metrik, der måler den gennemsnitlige præcision over flere forespørgsler eller brugere, typisk brugt i informationsgenfinding og anbefalingssystemer.

Kort fortalt

Kort fortalt: MAP fortæller, hvor godt en model rangerer relevante resultater øverst, i gennemsnit over flere forespørgsler.

Kategori
metrik
Niveau
øvet
Udtale
[ˈmiðˀəl ˈɡenˀəmsnitli pʁɛsiˈɕoˀn]

Betydninger

1
  1. 1

    En evalueringsmetrik, der beregner gennemsnittet af de gennemsnitlige præcisioner for en samling af forespørgsler. For hver forespørgsel beregnes gennemsnitlig præcision (AP) som summen af præcisioner ved hver relevant dokumentposition divideret med antallet af relevante dokumenter. MAP er så gennemsnittet af AP over alle forespørgsler.

    • I TREC-evalueringen blev MAP brugt til at sammenligne forskellige genfindingssystemer.

Hvornår bruges det

MAP bruges til at evaluere kvaliteten af søgealgoritmer eller anbefalingssystemer, især når der er flere relevante dokumenter eller items per forespørgsel. Det beregnes ved først at beregne gennemsnitlig præcision (Average Precision) for hver forespørgsel og derefter tage gennemsnittet over alle forespørgsler.

Formel

AP = (1/|R|) * Σ_{k=1}^{n} P(k) * rel(k)
MAP = (1/|Q|) * Σ_{q=1}^{|Q|} AP_q
hvor P(k) er præcision ved cut-off k, rel(k) er 1 hvis dokumentet er relevant, 0 ellers, R er mængden af relevante dokumenter, og Q er mængden af forespørgsler.

Oprindelse

Termen opstod inden for informationsgenfinding i 1990'erne som en måde at måle rangeringens kvalitet over flere forespørgsler.

Afledte ord

1