PsychologiaUczenie się, nawyki i nagroda

Nowy sygnał może prawie niczego nas nie nauczyć, jeśli stary sygnał już doskonale przewiduje wynik

W efekcie blocking dwa bodźce mogą wielokrotnie pojawiać się razem przed ważnym wynikiem, a mimo to jeden z nich zostanie słabo wyuczony. Dzieje się tak, gdy drugi bodziec już wcześniej dobrze przewidywał to zdarzenie. Nowy sygnał nie wnosi wtedy wiele zaskoczenia ani informacji. To klasyczny argument przeciw prostej wizji uczenia jako mechanicznego zapisywania wszystkiego, co często występuje razem. Najważniejsze jest to, że nie uczymy się równie mocno wszystkich współwystępujących sygnałów; nowa wskazówka może zostać „zablokowana”, jeśli nie poprawia już przewidywania wyniku.

Jak powstaje blocking

Najpierw organizm uczy się, że bodziec A zapowiada wynik. Później prezentuje się razem A i nowy bodziec X, po czym następuje ten sam wynik. Mimo wielu prób AX–wynik, późniejsza reakcja na X może być znacznie słabsza niż wtedy, gdy X uczono bez wcześniejszego A. A „blokuje” uczenie o X, choć fizycznie X był równie często obecny przed wynikiem.

Współwystępowanie to za mało

Gdyby uczenie zależało wyłącznie od liczby sąsiadujących w czasie zdarzeń, X powinien zostać dobrze skojarzony z wynikiem. Blocking pokazał, że liczy się także wcześniejsze oczekiwanie. Jeśli wynik jest już w pełni przewidywany przez A, pojawienie się X nie poprawia prognozy w takim stopniu jak w sytuacji, gdy wynik był niespodziewany.

Błąd przewidywania

Modele takie jak Rescorla–Wagner opisują uczenie poprzez różnicę między wynikiem otrzymanym a przewidywanym. Duża różnica daje duży sygnał aktualizacji; wynik zgodny z oczekiwaniem daje niewiele powodów do zmiany. Blocking stał się jednym z klasycznych zjawisk, które można wyjaśniać właśnie redukcją błędu przewidywania.

To nie znaczy, że bodziec X jest całkowicie niewidoczny

Brak silnej reakcji na X nie musi oznaczać, że organizm w ogóle go nie przetworzył. W różnych teoriach dyskutuje się rolę uwagi, reprezentacji bodźców i sposobu testowania wiedzy. Efekt blocking jest ważny jako wzorzec zachowania, ale nie rozstrzyga samodzielnie, dokładnie na którym etapie ograniczone zostało uczenie lub ekspresja informacji.

Dlaczego mechanizm jest adaptacyjny

Środowisko pełne jest współwystępujących sygnałów. Gdyby każdy równie mocno przejmował kontrolę nad zachowaniem, system uczyłby się ogromnej liczby przypadkowych korelacji. Preferowanie informacji, która poprawia przewidywanie wyniku, pomaga odróżniać sygnały rzeczywiście użyteczne od redundantnych.

Połączenie z nowoczesnym reinforcement learning

Idea błędu przewidywania wraca w modelach uczenia ze wzmocnieniem i badaniach dopaminy. Blocking historycznie wyrósł z warunkowania Pawłowowskiego, ale jego logika — ucz się najmocniej wtedy, gdy rzeczywistość zaskakuje — stała się jednym z najważniejszych pomostów między psychologią uczenia a neuronauką obliczeniową.

Blocking jako test konkurencji między wskazówkami

Efekt jest szczególnie użyteczny, bo oba bodźce w fazie AX są fizycznie obecne przed wynikiem. Różni je historia predykcyjna: A ma już znaczenie, X pojawia się dopiero wtedy, gdy niewiele pozostaje do wyjaśnienia. Dzięki temu blocking pozwala badać, czy system rozdziela „zasługę” za wynik między konkurujące sygnały i czy nowe uczenie zależy od wartości informacyjnej bodźca, a nie samej bliskości czasowej.

Nie wszystkie teorie wyjaśniają blocking identycznie

Model Rescorla–Wagner akcentuje wspólny błąd przewidywania, natomiast teorie uwagowe sugerują, że przewidywalność wyniku może zmniejszać uwagę poświęcaną nowemu bodźcowi. Nowsze modele łączą kilka mechanizmów. Blocking jest więc ważny nie dlatego, że „udowadnia jeden algorytm”, lecz dlatego, że stawia każdej teorii uczenia wymagające pytanie: dlaczego obecny i skorelowany sygnał czasem uczy się bardzo słabo?

Co dzieje się po zmianie wyniku

Blocking można osłabić lub odwracać, jeśli późniejsze doświadczenia zmienią znaczenie wcześniejszych wskazówek. Pokazuje to, że efekt nie jest trwałym „wyłączeniem” nowego bodźca, lecz wynikiem konkretnej historii predykcyjnej. System może ponownie ocenić znaczenie X, gdy A przestaje być wystarczającym wyjaśnieniem wyniku. To ważne, bo podkreśla plastyczność konkurencji między wskazówkami: raz zablokowana informacja nie musi na zawsze pozostać behawioralnie nieistotna.

#blocking#błąd przewidywania#Rescorla-Wagner#uczenie asocjacyjne#warunkowanie
Źródła i weryfikacja
Otrzymuj codzienne losowe ciekawostki