Od siatek drucianych do sprzężenia sensoryczno-ruchowego
W 1968 roku informatyk Ivan Sutherland zaprezentował na Harvardzie i Uniwersytecie Utah zawieszony pod sufitem optyczny zestaw słuchawkowy, nazywany Mieczem Damoklesa, który wyświetlał świecący drucianą siatką sześcian unoszący się w fizycznym laboratorium. Sześcian nie miał ani tekstury, ani cienia, a mimo to obserwatorzy od razu traktowali go jako obiekt zajmujący stały punkt w pomieszczeniu. Dlaczego? Ponieważ za każdym razem, gdy pochylali się w lewo lub podchodzili bliżej, linie sześcianu były przeliczane tak, by odpowiadały ruchom głowy.
Dekady później Jaron Lanier spopularyzował określenie „wirtualna rzeczywistość” pod koniec lat 80. w VPL Research, a Carolina Cruz-Neira, Thomas DeFanti i Dan Sandin w 1992 roku zaprezentowali CAVE Automatic Virtual Environment, czyli pomieszczenie z projekcją dookólną, w którym małe zespoły mogły wspólnie badać warstwy geologiczne lub struktury cząsteczek bez ciężkiego sprzętu na głowie. Niezależnie od formy sprzętu jedna lekcja pozostawała niezmienna: zanurzenie zależy znacznie mniej od dekoracyjnych detali, a znacznie bardziej od zależności sensomotorycznych, czyli ścisłej zgodności między ruchem ciała a reakcją świata.
Trzy filary przekonującej obecności
Badania kognitywisty Mela Slatera na University College London i Uniwersytecie w Barcelonie rozdzieliły doświadczenie wirtualne na iluzję miejsca (bycie tam) i iluzję wiarygodności (wydarzenia wydające się autentyczne). Współcześni twórcy budują te dwa wrażenia z konkretnych rozwiązań inżynierskich:
- Opóźnienie od ruchu do obrazu poniżej 20 milisekund: Gdy obracasz głową, twój układ przedsionkowy oczekuje, że horyzont obróci się w przeciwną stronę niemal natychmiast. Nowoczesne środowiska uruchomieniowe oparte na standardzie OpenXR grupy Khronos Group stosują asynchroniczne przesunięcie czasowe (timewarp) i późną reprojekcję, dzięki czemu klatki odpowiadają kątowi głowy tuż przed wyświetleniem.
- Prawdziwa stereopsja i paralaksa ruchu: Renderowanie lekko przesuniętych punktów widzenia dla każdego oka zapewnia silne wskazówki głębi w zasięgu ręki, a przemieszczanie głowy (lekkie pochylanie na boki) pokazuje, który odległy grzbiet znajduje się przed innym.
- Dwuuszne przestrzenne akustyki: Oczy widzą tylko stożek przed nami, a uszy rejestrują pełną sferę 360 stopni. Funkcje transferu związane z głową (HRTF) subtelnie filtrują częstotliwości dźwięku w zależności od budowy ucha i odbić w pomieszczeniu, dzięki czemu wyczuwasz, czy stoisz w drewnianej chacie, czy w sklepionym wapiennym kamieniołomie, zanim się odwrócisz.