PsychologiaUczenie się, nawyki i nagroda

Nieregularnie nagradzane zachowanie może dłużej utrzymywać się po zniknięciu nagrody

Jeżeli reakcja była wzmacniana tylko podczas części prób, po całkowitym usunięciu nagrody może zanikać wolniej niż reakcja wcześniej nagradzana za każdym razem. To tzw. efekt częściowego wzmocnienia podczas wygaszania. Nie oznacza jednak prostej zasady, że każda losowa nagroda automatycznie tworzy „silniejszy nawyk”. Efekt zależy od procedury, a badacze od dekad spierają się o mechanizmy, które go powodują. Najważniejsze jest to, że brak nagrody jest mniej informacyjny, jeśli podczas nauki brak nagrody zdarzał się już często; dlatego wygaszanie może przebiegać wolniej.

Dwie różne historie uczenia

W jednym warunku każda poprawna reakcja może być nagradzana. W drugim nagroda pojawia się tylko czasami. Kiedy następnie całkowicie ją usuwa się w obu grupach, zachowanie po częściowym wzmocnieniu często utrzymuje się dłużej. Organizm ma po prostu inną historię doświadczeń: brak nagrody nie jest dla niego natychmiastowym sygnałem, że reguła definitywnie się zmieniła.

Dlaczego brak nagrody jest mniej zaskakujący

Po stałym wzmacnianiu pierwsza seria niepowodzeń silnie różni się od wcześniejszego doświadczenia. Po częściowym wzmacnianiu niewzmocnione próby były już normalną częścią treningu. Jedna z rodzin wyjaśnień zakłada więc, że zachowanie generalizuje lepiej z fazy treningu do fazy wygaszania, bo nowa sytuacja mniej różni się od starej.

Kilka konkurujących teorii

Historycznie efekt tłumaczono m.in. teorią frustracji, teorią sekwencyjną i modelami uwzględniającymi oczekiwanie pominięcia nagrody. Współczesne modele obliczeniowe próbują opisać, jak organizm uczy się rozkładu wyników oraz jak interpretuje serię braku nagród. Nie ma potrzeby sprowadzać zjawiska do jednego intuicyjnego hasła o „uzależnieniu od losowości”.

Efekt nie zawsze wygląda tak samo

Wynik zależy od układu międzyosobowego lub wewnątrzosobowego, rodzaju zadania, proporcji wzmocnienia i sposobu mierzenia wygaszania. Istnieją też procedury, w których pojawia się efekt odwrócony. To ważne ograniczenie, bo popularne teksty często przedstawiają partial reinforcement extinction effect jako uniwersalne prawo bez warunków brzegowych.

Co z hazardem i aplikacjami

Nieregularne nagrody są często przywoływane w dyskusjach o hazardzie czy projektowaniu aplikacji, ale sam eksperymentalny efekt częściowego wzmocnienia nie wystarcza do wyjaśnienia całej złożoności takich zachowań. W realnym świecie działają dodatkowo pieniądze, bodźce społeczne, oczekiwania, regulacja emocji i wiele harmonogramów nagród jednocześnie. Mechanizm jest elementem wyjaśnienia, nie gotową diagnozą.

Najciekawsza lekcja

Organizm uczy się nie tylko tego, czy nagroda istnieje, lecz również jak regularnie się pojawia. Historia niepewności wpływa później na interpretację braku wyniku. To dobry przykład tego, że identyczne końcowe zdarzenie — brak nagrody — może wywołać inne zachowanie zależnie od wcześniejszego rozkładu doświadczeń.

Dlaczego „losowość” nie jest jednym harmonogramem

Częściowe wzmocnienie może mieć wiele form: stałą proporcję prób nagradzanych, harmonogram zależny od czasu, serie nagród i braków albo bardziej złożone rozkłady. Dwa systemy z tą samą średnią częstością nagrody mogą tworzyć odmienne oczekiwania. Dlatego mechanizm PREE analizuje się przez konkretną historię prób, a nie przez ogólną etykietę „nagroda pojawia się losowo”. To jeden z powodów, dla których proste analogie do codziennych aplikacji bywają zbyt daleko idące.

Uczenie o zmienności wyników

Organizm może nauczyć się nie tylko średniej wartości nagrody, ale również tego, że wyniki są niestabilne. Wygaszanie po częściowym wzmocnieniu zaczyna się więc od doświadczenia, które mieści się w znanym zakresie: kolejna próba bez nagrody nie musi jeszcze oznaczać zmiany reguły. Dopiero dłuższa seria pominięć dostarcza mocniejszych dowodów. To pokazuje, jak oczekiwanie zmienności wpływa na tempo aktualizacji zachowania.

#częściowe wzmocnienie#nagroda#niepewność#warunkowanie#wygaszanie
Źródła i weryfikacja
Otrzymuj codzienne losowe ciekawostki