Jeden błysk może wyglądać jak dwa, jeśli towarzyszą mu dwa dźwięki
W sound-induced flash illusion jeden krótki błysk połączony z dwoma szybko następującymi sygnałami dźwiękowymi bywa postrzegany jako dwa błyski. Oryginalna demonstracja Shams, Kamitani i Shimojo z 2000 roku była ważna, bo odwracała popularne założenie, że w integracji wielozmysłowej to wzrok prawie zawsze dominuje nad słuchem. Ponad dwie dekady badań potwierdziły, że efekt jest solidny i zależy m.in. od czasu między bodźcami oraz ich wiarygodności. Najlepiej rozumieć go jako probabilistyczną integrację wskazówek o liczbie i czasie zdarzeń, a nie dosłowne „przeprogramowanie oka przez ucho”.
Dwa piknięcia tworzą drugi błysk
W klasycznej wersji uczestnik patrzy na bardzo krótki błysk. Jeśli w podobnym momencie słyszy dwa krótkie dźwięki, może zgłosić, że zobaczył dwa błyski. Istnieje również wariant fuzji: dwa błyski połączone z jednym dźwiękiem mogą być częściej zgłaszane jako jeden. Najmocniejszy efekt występuje przy odpowiednio krótkich odstępach czasowych, gdy układ ma powód traktować sygnały jako należące do wspólnego zdarzenia.
Dlaczego słuch może wygrać w czasie
Wzrok jest zwykle bardzo dobry w lokalizacji przestrzennej, lecz słuch ma wysoką rozdzielczość czasową. Dwa krótkie dźwięki rozdzielone niewielkim odstępem dostarczają więc wiarygodnej informacji, że mogły wystąpić dwa zdarzenia. Jeśli błysk jest krótki i słabo rozstrzyga liczbę zdarzeń, system integracyjny może przesunąć percept w stronę wskazówki słuchowej. To wpisuje się w szerszą zasadę: zmysł nie dominuje zawsze — większą wagę może dostać źródło bardziej wiarygodne dla konkretnego zadania.
Dwadzieścia lat replikacji
Przegląd opublikowany w 2020 roku podsumował ponad sto badań wykorzystujących SIFI. Efekt obserwowano w różnych grupach i konfiguracjach, a prace neurofizjologiczne wskazują na interakcje słuchowo-wzrokowe obejmujące również wczesne obszary wzrokowe. To czyni go jednym z najlepiej zbadanych paradygmatów integracji wielozmysłowej.
Mózg musi zdecydować, czy sygnały mają wspólną przyczynę
Integracja nie powinna zachodzić bez ograniczeń. Dźwięk dochodzący kilka sekund później nie powinien tworzyć dodatkowego błysku. Modele multisensoryczne uwzględniają więc zarówno wiarygodność sygnałów, jak i prawdopodobieństwo wspólnej przyczyny. Im lepiej bodźce pasują czasowo i przestrzennie, tym rozsądniej je połączyć. Iluzja pojawia się wtedy, gdy reguły zwykle użyteczne dla prawdziwych zdarzeń zostają wykorzystane przez sztucznie skonstruowany zestaw bodźców.
Dlaczego to ważne
Efekt pokazuje, że nawet coś tak podstawowego jak liczba widzianych błysków nie musi należeć wyłącznie do domeny wzroku. Świadomy percept zdarzenia może być wynikiem negocjacji między modalnościami. To pomaga zrozumieć, dlaczego system sensoryczny jest bardziej podobny do sieci współpracujących źródeł informacji niż do zestawu niezależnych kamer, mikrofonów i czujników.
Złudzenie działa, bo zmysły mają różne specjalizacje
Wzrok jest bardzo dobry w lokalizowaniu obiektów w przestrzeni, ale dla krótkich zdarzeń słuch może dostarczać precyzyjniejszej informacji czasowej. Gdy pojedynczy błysk pojawia się w pobliżu dwóch szybko następujących po sobie sygnałów dźwiękowych, układ integrujący zmysły musi zdecydować, czy ma do czynienia z jednym, czy kilkoma zdarzeniami. Jeśli bodźce wyglądają na wspólne w czasie i pochodzeniu, informacja słuchowa o liczbie impulsów może „rozszczepić” percept wzrokowy. Efekt zależy od odstępów czasowych i przestrzennych oraz od wiarygodności sygnałów, co pasuje do szerszego obrazu multisensorycznej integracji jako ważenia informacji, a nie bezwarunkowej dominacji jednego zmysłu. Ta sama logika wyjaśnia, dlaczego w innych zadaniach to wzrok może przeciągać lokalizację dźwięku. Mózg nie ma stałej hierarchii zmysłów; wykorzystuje ten kanał, który w danym problemie zwykle niesie bardziej użyteczną informację.