environment

I forstærkningslæring og AI-agent-systemer: den verden eller det system, som agenten interagerer med, herunder tilstande, overgange og belønninger.

Kort fortalt

Kort fortalt: Miljøet er den omverden, som en AI-agent handler i; det modtager agentens handlinger og sender nye tilstande og belønninger tilbage.

Kategori
begreb
Niveau
begynder

Betydninger

2
  1. 1

    I forstærkningslæring: den eksterne verden, som en agent interagerer med, defineret ved en Markov-beslutningsproces (MDP) med tilstande, handlinger, overgangssandsynligheder og belønninger.

    • Miljøet i et skakspil består af brættets konfiguration, brikkernes positioner og reglerne for gyldige træk.Sutton & Barto, Reinforcement Learning: An Introduction, 2018
  2. 2

    I bredere AI-sammenhæng: den kontekst, hvori en intelligent agent opererer, herunder sensoriske input, handlingsmuligheder og feedback.

    • I en simuleret robotstyringsopgave er miljøet defineret ved fysiske love, sensorstøj og målbetingelser.Russell & Norvig, Artificial Intelligence: A Modern Approach, 2020

Hvornår bruges det

Begrebet bruges i forstærkningslæring til at definere den dynamik, agenten lærer at navigere i. Miljøet kan være simuleret (fx et computerspil) eller fysisk (fx en robot). Det specificerer tilstandsrum, handlingsrum og belønningsfunktion.

Oprindelse

Fra engelsk 'environment' (miljø, omgivelser) via AI-forskning, især inden for forstærkningslæring.

Afledte ord

2

Kilder

2
  • Reinforcement Learning: An Introduction
  • Artificial Intelligence: A Modern Approach