Experiment: Volatile Bandit

Toon details

Achtergrond

Het Volatile‑Bandit‑experiment is een klassiek paradigma in besluitvormingsonderzoek dat bekijkt hoe mensen leren en hun keuzes aanpassen in onzekere omgevingen. Deze taak is nuttig voor het bestuderen van reinforcement learning, cognitieve flexibiliteit en besluitvorming onder onzekerheid.In dit experiment krijgen deelnemers twee opties te zien (weergegeven door blauwe en groene vormen) en moeten ze via trial‑and‑error leren welke optie waarschijnlijker beloont. Het experiment bestaat uit twee fasen: een statische fase waarin één optie consistent beter is, en een volatiele fase waarin de betere optie in de tijd wisselt.

Methode

Fase 1 (Statisch): 120 proeven

  • Een kleur (blauw of groen) is met 75% kans correct
  • De andere kleur is met 25% kans correct
  • Deelnemers leren welke kleur doorgaans beter is

Fase 2 (Volatiel): 170 proeven

  • De betere kleur wisselt elke 30–40 proeven
  • Elke kleur houdt 60% vs 40% kans wanneer het de “betere” optie is
  • Deelnemers moeten zich aan deze veranderingen aanpassen

Puntentelling

  • Correcte keuzes leveren punten op gelijk aan het getal op de gekozen vorm
  • Onjuiste keuzes leveren 0 punten op
  • Doel is de doellijn op de voortgangsbalk te bereiken

Referenties

  • Behrens, T. E. J., Woolrich, M. W., Walton, M. E., & Rushworth, M. F. S. (2007). Learning the value of information in an uncertain world. Nature Neuroscience, 10(9), 1214-1221. 10.1038/nn1954
  • Daw, N. D., O'Doherty, J. P., Dayan, P., Seymour, B., & Dolan, R. J. (2006). Cortical substrates for exploratory decisions in humans. Nature, 441(7095), 876-879. 10.1038/nature04766
  • Nassar, M. R., Wilson, R. C., Heasly, B., & Gold, J. I. (2010). An approximately Bayesian delta-rule model explains the dynamics of belief updating in a changing environment. Journal of Neuroscience, 30(37), 12366-12378.

Veelgestelde vragen

Heb je een andere vraag? Laat het ons weten.

Wat test de volatile bandit?

Leren wanneer beloningskansen onvoorspelbaar veranderen — de reinforcement-learning-logica van foerageren in een wisselende omgeving.

Hoe gedragen goede lerenden zich?

Ze volgen de recente beloningsgeschiedenis en zetten na omkeringen snel weer in, waarbij ze vasthoudendheid (vertrouwd bewijs) afwegen tegen flexibiliteit (verandering opmerken).

Welke modellen beschrijven dit?

Delta-regel- en Kalman-filterachtige lerende modellen met dynamische leersnelheden; menselijke aanpassingen worden in computationeel psychiatrisch onderzoek vaak goed door zulke modellen beschreven.

Wat wijzen mijn keuzes uit?

Je aanpassingssnelheid na omkeringen en de totale geoogste beloning indexeren je leerstijl in deze sessie; geen enkele strategie is onder alle volatiliteitsomstandigheden het beste.

Over dit experiment

Dit experiment is een educatieve aanpassing voor demonstratiedoeleinden. Het is geen klinisch diagnostisch hulpmiddel. Resultaten weerspiegelen uw prestatie in deze specifieke sessie en mogen niet worden geïnterpreteerd als een beoordeling van uw cognitieve vaardigheden.

Gegevensprivacy

Uw experimentgegevens worden lokaal in uw browser verwerkt en opgeslagen. Er worden geen gegevens naar een server geüpload, tenzij u ze expliciet exporteert.

Trakteer me op een koffie