Neural radiance field (NeRF) teknolojisi, 2 boyutlu görüntüleri 3 boyutlu modellere dönüştürmede inanılmaz bir yetenek sergilemeye başlasa da Maryland Üniversitesinden araştırmacılar, göz yansımalarından başka hiçbir şey kullanmadan 3 boyutlu model çıkararak işleri bambaşka bir boyuta taşıyor.
Araştırmacılar, arXiv’de yayınlanan çalışmada bir odada hareket eden bir kişinin birden fazla yüksek çözünürlüklü görüntüsünü nasıl alabildiğini, ardından kornealarındaki yansımalara bakmak için nasıl yakınlaştırabildiğini, irislerin ekleyebileceği renk ve ayrıntıları nasıl kaldırdığını ve 3 boyutlu görüntüler oluşturmak için nasıl kullandığını gösterdi.
Bu üç boyutlu modeller şu an çok yüksek çözünürlükte değil. Bu nedenle modellerin de çok ayrıntılı olduğu söylenemez.
Çalışma Gelecek Vadediyor
Araştırmacılar, bunu denemek için Miley Cyrus ve Lady Gaga’nın video kliplerindeki göz yansımalarını yakınlaştırarak kaliteli yakın çekim görüş ve uygun aydınlatma koşullarından yararlanmayı umut etti. Ne yazık ki çözünürlük yeterince yüksek değildi ve Miley Cyrus’un bir aydınlatmaya, Lady Gaga’nın ise biraz insan gövdesine benzeyen bir şeye bakıyor olabileceğini tespit edebildiler.
İnsanların sadece bir göz yansımasından ne kadar çok bilgi alabileceğini görmek oldukça ilginç geliyor. Bunun nasıl yapıldığı ise şu ifadelerle açıklanıyor:
“Kornea yapısı tüm sağlıklı yetişkinlerde aşağı yukarı aynıdır. Bu yüzden görüntüdeki bir kişinin korneasının piksel boyutunu sayarsak gözlerinin de tam olarak nerede olduğunu bulabiliriz.”
İrisin görünmesini engellemek için bu dokuyu öğrenen bir 2 boyutlu doku haritası da eş zamanlı olarak eğitiliyor ve arka planda bir doku ayrıştırması gerçekleştiriliyor.