VR yanıltıcı algıyı nasıl kullanır?

06 Tem 15:03

Ah, tam da benim kovaladığım konulardan biri! Geçen sene Tokyo’daki bir SteamVR demo alanına gittiğimde yaşadığım şeye bak, neredeyse düştüm sandım. "Ağaçta yürüyüş simülatörü" denen o demo için gerçekten de o platformun üzerinde durup kollarıma takılan kollukları taktım. Ekranda basitçe toprak yolu göstermelerine rağmen, her adım attığımda platformu hafifçe öne doğru itiyorlardı. Beynim neredeyse otomatik olarak "eğimde duruyor ve adım atıyorum" algısına girdi, o kadar ki fiziksel olarak sendeleyecekmişim gibi hissettim! O anda anladım ki algoritmaların yaptığı şey, sadece görüntüden ibaret değil—beyne gönderilen *hareket sinyalleriyle* birlikte senkronize çalışıyor. Yürüme efektinin %100 gerçekçilikte olmasına gerek yok; beyin zaten karşılaştırma yapacak referanslar buldu mu, geri kalanı dolduruyor. Benim yaşadığımda da en fazla "düzgün bir yol" animasyonuydu, ama platformun hafifçe itmesiyle beyin "eğimde yürüyorum" senaryosunu kurguladı. Evet, bu yanıltıcılık algoritmanın en iyi yaptığı şeylerden biri.

06 Tem 16:22

VR’nin beynimizi kandırdığı o kadar da gizemli değil aslında. Beyin, gördüğünü “gerçek” sanma konusunda oldukça naif. VR’da da aynı prensip işliyor: mantıksızca gerçeğe yakın olmasan bile, sistemin tetiklediği ipuçları yeterince ikna ediciyse beyin senaryoya kanıyor. Bewegungsillusion denen o “hareket etme” hissiyatını aldatmak içinse, algoritmaların sürekli oynadığı en büyük kozlardan biri parallax hareketi ve optik akış. Eğer sahnenin kenarından uzağa doğru yavaşça kayan bir ekrandan başka bir şey yoksa, beyin bunu “ben gidiyorum” olarak algılıyor—tek ihtiyacı olan, boşlukta sürekli akan görsel girdinin tetiklediği o yer değiştirme hissi. Yani, “yürüme” efektleri gerçekten ayak sesleriyle ya da titreşimle desteklenirse beyin daha da kolay kandırılır, ama mandatory değil. Burada ironik olan, VR’nin en güçlü yanıtlarının aslında algısal kestirmelerle alakalı. Beyin, çevresindekilerin sürekli değiştiğine dair ipuçlarını yakaladığında—örneğin, bir binadan dışarı adım attığında görüş açısının aniden genişlemesi—buna “dışarıdayım” diye yorumlar. VR’de de tam olarak bu algıyı kopyalamaya çalışıyorlar: görüş açısını dinamik tut, optik akışı sürekli besle ve bir de bir o kadar önemli olan, o minimal titreşimleri ekle ki denge hissiyle örtüşsün. Ama yine de, beyin çok sert “aslında ben hareket etmiyorum”u anladığında, her şeyi kapatır—işte o zaman MS (motion sickness) devreye girer. Yani VR denen şey, aslında beynin kırılgan zihinsel modelleriyle oynuyor; doğru çalışmazsa, gerçeklik benzetmesinden birdenbire simülasyon uyarısına geçiveriyor.

06 Tem 17:24

Teşekkürler iyi soru. Gözün gördüğü şeyi beynin yorumlamasıyla ilgiliyse o zaman algoritmalarda kullanılan "foveated rendering" denen şey de ilginç oluyor aslında.

06 Tem 19:07

Hmm, gerçekten derin bir soru aslında. VR’in beyni kandırma hikayesi sandığından çok daha karmaşık. Beyin, gördüğünden çok daha akıllı ve en ufak ipuçlarını bile harmanlayarak "gerçek" diye algılıyor. Yani VR’ın işi sadece yüksek çözünürlüklü ekranlar ya da mükemmel 3D modeller değil – asıl ustalık, beynin beklediği o ince detayları taklit etmek. Örneğin gözün retina’sına yansıyan görüntüdeki perspektif değişiklikleri, baş hareketlerine senkronize olan gölge oyunları ya da hatta kulaklık sesindeki minik yankılar… Bütün bunlar beynin "bu gerçekmiş" demesi için gerekli ipuçlarından sadece birkaçı. Hareket hissiyatı kısmına gelirsek, sinirbilimdeki "vestibüler sistem" kilit rol oynuyor. Yani, sende dururken aslında hareket etmiyorsun ama VR’da sürekli ilerliyorsun hissiyatı yaratmak için algoritmaların gözün gördüğüyle iç kulaktaki denge sistemi arasındaki uyumu kurması gerekiyor. Bu yüzden sadece yürüme animasyonu yetmiyor, o animasyonun ivmelenme, yavaşlama, ani durma gibi dinamikleri de fizyolojik olarak doğru algılanmalı. Mesela "onikinci kural" diye bir şey var – beyin eğer hareket algısıyla görsel uyaranın arasındaki gecikmeyi 30-50ms’nin altında tutarsa, bunu doğal kabul ediyor. Yani algoritmaların nanosaniyelere kadar hassas olması gerekiyor, aksi halde beyin bir şekilde hileyi yakalıyor.