Denkbar wäre für die Kamera zum Beispiel die Integration von Hand Tracking, wie sie z.B. von Leap Motion angeboten wird. (
https://www.leapmotion.com/product/vr) Zumindest ist das für mich auf den ersten Blick die plausibelste Anwendung.
AR wird damit nicht zu machen sein, dafür bräuchte man in jedem Fall zwei Kameras, und was auf das Display kommt müsste ja außerdem etwas anzeigen, das ziemlich genau zur Position unserer echten Augen passt; wenn man plötzlich alles von 5cm weiter vorne sieht, würde das wohl schnell zu Übelkeit führen.