Microsoft präsentiert neue HoloLens-Demos auf der Build Conference

Das kommende HoloLens-Headset von Microsoft ist das erste erweiterte Augmented-Reality-Gerät, das der Öffentlichkeit vorgestellt wurde. Leider war Microsoft so knapp, dass wir nicht viel darüber wissen.

Auf der Build Developer Conference von Microsoft in San Francisco bekamen wir heute einen weiteren verlockenden Einblick in die Technologie. Die Demo selbst ist glänzend, aber nicht sehr informativ. Wir können jedoch einige wichtige Details herauslesen, indem Sie zwischen den Zeilen lesen. In diesem Fall ist das, was Microsoft nicht gezeigt hat, informativer als das, was sie getan haben.

Die Demo

Einige der HoloLens-Ingenieure kamen auf die Bühne, um einige der neuen Demos vorzustellen, die sie für die Hardware entwickelt hatten. Eine Demo ist eine Nachbildung einer deprimierend spärlichen Wohnung eines Ingenieurs und bedeckt Wände und Boden mit virtuellen Apps und Spielzeug. Ein anderer holt einige Ärzte ein, um ein Modell eines menschlichen Körpers zu zeigen, und nimmt es dann auseinander. Schließlich baut ein Kit-Roboter einen ausdrucksstarken, virtuellen Oberkörper auf und entfaltet eine große Statusanzeige, so dass er in Echtzeit angepasst werden kann.

Der Teufel, die Details

Bisher so beeindruckend - aber viele meiner ersten Fragen zu den HoloLens Fünf Fragen zu Microsofts "Project HoloLens" Fünf Fragen zu Microsofts "Project HoloLens" Das neue Augmented Reality-Headset von Microsoft ist sehr aufregend - aber es kann die grundlegenden Probleme von AR lösen ? Read More bleibt unbeantwortet. Schauen wir uns also etwas näher an.

Okklusion

Fühlt sich die Demo für Sie ein bisschen inszeniert? Beobachten Sie die Kamerabewegungen sorgfältig. Es ist nicht nur die übliche Unbequemlichkeit der Messe. Sehen Sie sich die Demo erneut an und achten Sie auf Momente, in denen ein Mensch an einem virtuellen Objekt vorbeigeht.

Das nennt man Okklusion, und es ist ein schweres Problem in der erweiterten Realität. Um dieses Phänomen korrekt wiederzugeben, müssen die HoloLens die Welt schnell und genau genug kartieren, um die Silhouette der Person aus dem virtuellen Bild zu entfernen. Andernfalls haben Sie einen Tiefenkonflikt: Ihre Stereovision sagt Ihnen, dass sich das virtuelle Objekt hinter der Person befindet, aber es wird darüber angezeigt. Wie wir aus der virtuellen Realität gelernt haben, sind diese Arten von Konflikten verstörend und zerstören die Illusion, dass die Objekte, mit denen Sie interagieren, greifbare Teile der Welt sind.

Die Demo unternimmt erhebliche Anstrengungen, um dies zu verhindern. Sie können sehen, wie der Kameramann reagiert, wenn sich einer der Personen auf der Bühne auf ein virtuelles Objekt zu bewegt, um zu verhindern, dass sich diese überlappen. Die gesamte Demo ist aufwendig choreographiert. Wenn Sie in der ersten Demo vom Stuhl aufstehen, tritt der Mann auf der Bühne vor einen virtuellen Roboter - und die Kamera wird in diesem Moment in eine andere Richtung gerichtet.

Sie machen es nur ein paar Mal durcheinander. Während der Roboter-Demo geht der Roboter kurz vor ein paar virtuellen Punkten auf dem Boden vorbei und einer der Moderatoren tritt auf sie. In beiden Fällen gibt es einen tiefen Konflikt: Sie sehen die virtuellen Punkte weiterhin durch die realen Objekte, was bedeutet, dass Microsoft noch keine Lösung für dieses Problem hat.

Weitere Beweise dafür finden Sie in derselben Demo, wenn eine Visualisierung der Umgebungskarte des Headsets angezeigt wird. Wenn Sie Frame für Frame durchgehen und genau hinschauen, können Sie feststellen, dass die Karte auf verschiedene Weise falsch ist: Der Tisch befindet sich auf einer erhöhten Plattform, die in der Karte zu einer vagen Ausbeulung wird. Der Roboter ist ebenfalls in der Karte sichtbar, jedoch nur als kleiner Klumpen. Die Ränder des Schreibtisches fehlen. Sie können diese Probleme wahrscheinlich auf die begrenzte Auflösung des Kinect-Tiefensensors im Headset zurückführen. In jedem Fall reicht die Genauigkeit hier nicht aus, um virtuelle Objekte korrekt zu verdecken.

Um es klar zu sagen: Dies könnte ein Showstopper sein. Der Zweck der HoloLens ist es, echte und virtuelle Objekte auf überzeugende Weise nahtlos zu kombinieren. Okklusion ist ein notwendiger Teil der Illusion. Occlusion ist ein solch kraftvoller Tiefenhinweis, dass das Hinzufügen einer einzelnen weißen Linie zu einem Video selbst einen effektiven 3D-Effekt erzeugen kann.

Microsoft ist sich dessen klar bewusst. Sie zeigen Okklusionen in ihren Werbematerialien. Aus ihren Demos sieht es jedoch nicht so aus, als könnten sie es tatsächlich tun. Wenn Microsoft dieses Problem nicht lösen kann, gibt es kein Produkt. Benutzer leben nicht in aufwändig choreografierten Demos in leeren Häusern. Sie tolerieren keine konstanten, immersionsbrechenden Rendering-Fehler. Ich bin ehrlich gesagt erstaunt, dass mehr von der Tech-Presse nicht über dieses Problem spricht. Ich bin sehr gespannt, ob Microsoft einen Plan zur Lösung dieses Problems hat.

Benutzeroberfläche

Jedes Mal, wenn ich ein Video sehe, das die HoloLens-Benutzeroberfläche zeigt, war der Satz, der mir immer wieder durch den Kopf geht “Werden wir das wirklich noch einmal tun??”

Mit jeder neuen Computerplattform, sowohl dem PC als auch dem Smartphone, durchlaufen wir einen schlechten UI-Zyklus, bevor wir es herausfinden. Das Problem ist, dass die fehlerhaften Benutzeroberflächen auf genau die gleiche Weise schlecht sind und dass die Benutzeroberfläche der HoloLens schlecht ist. Ich wünschte, wir könnten das Muster einmal erkennen und zum guten Teil übergehen. Folgendes tun die HoloLens (und jede neue Plattform) falsch:

• Zunächst versuchen sie, alte Paradigmen neu zu erstellen, anstatt neue zu schaffen. Denken Sie an die alten Treo-Smartphones, die um eine physische Tastatur und einen Maus-emulierenden Stift herum gebaut wurden. Das HoloLens ist genau das Gleiche, indem Sie mit dem Kopf eine Maus emulieren und den Finger klicken. Heck, irgendwann der Ingenieur “schleppt” ein Fenster, indem er es an seinem Kopf befestigt, etwas, vor dem der Oculus VR Best Practices-Leitfaden ausdrücklich warnt. Die HoloLens sind kein PC, und der Versuch, eine PC-Benutzeroberfläche zu verwenden, wird nicht funktionieren.
• Zweitens hüllen sie sich in die glänzenden Teile der Benutzeroberfläche und erzeugen verzierte, nutzlose Flusen. Erinnerst du dich an Clippy? Microsoft Bob? Das Kunstleder auf der alten iOS-Notizen-App? Dieses Zeug ist sinnloses visuelles Durcheinander. Die virtuelle Hund- und Fischschüssel und der Roboter sind genau dasselbe. Wie oft müssen wir das tun, bevor wir erkennen, dass Minimalismus die einzig gute Idee ist?

Wenn wir schon dabei sind, die “Hologramme” selbst sind visuell ein Durcheinander. Sie können sich nicht entscheiden, ob es sich um saubere Scheiben oder um doofe Cartoon-Blobs handelt. Die Elemente der Benutzeroberfläche sind viel zu groß und erfordern weitreichende Gesten, einschließlich physischer Bewegungen, was aus vielen Gründen schlecht ist.

Wenn es so aussieht, als wäre ich darüber verärgert, liegt das daran, dass immersive Benutzeroberflächen irgendwann wirklich sehr cool werden. Die bisher gezeigte HoloLens-Benutzeroberfläche ist ein komplettes Durcheinander, und das ist eine Schande. Eine gute Benutzeroberfläche ist der Unterschied zwischen Treo und iPhone - zwischen einem IBM-Mainframe und dem ursprünglichen PC mit Maus und Tastatur. Es ist der Unterschied zwischen einem Spielzeug für Nerds und einer sich weltweit verändernden Innovation.

Formfaktor

Es gibt eine wichtige gute Nachricht. Microsoft gebracht “Hunderte” von HoloLens-Geräten zur Show und zeigen sie den Teilnehmern. Das letzte Mal, als Microsoft Demos machte, wurden die Leute in sperrige, drahtgebundene Headsets festgeschnallt. Die auf der Bühne verwendeten Headsets waren Requisiten, die nur ein Schwarzweißbild mit niedriger Auflösung anzeigen konnten. Der Moderator erklärt jedoch eindeutig, dass es sich bei den Headsets handelt “Ich mag die, die Sie heute auf der Bühne gesehen haben.” Mit anderen Worten, Microsoft hat die HoloLens-Hardware erfolgreich miniaturisiert, um in einen tragbaren Formfaktor zu passen, was eine gute Nachricht ist.

Erfahrung eines Entwicklers mit der neuen Hardware:

“Ich ging "auf die Baustelle" und sie überlagerten die Blaupausen an der Wand. Dann konnte ich sehen, wie eine Tür aussehen würde, und bemerkte, dass ein Balken im Weg war. Wir schoben die Tür weg und fügten eine Schicht mit Elektro- und Wasserinstallationen hinzu und sahen, dass jetzt ein Rohr im Weg war. Ich starrte und klickte auf die Pfeife und hinterließ eine Nachricht für den Klempner, um die Pfeife wegzubewegen.

Dann kam ich zurück in die Rolle des Klempners und holte meine Notiz heraus (sie hing dort), blickte und klickte und hörte meine eigene aufgenommene Stimme.

Das Tragen des Geräts ist gewöhnungsbedürftig. Es war nicht sehr gut eingestellt und drückte ein wenig auf meine Nase. Aber ich denke, ich kann es in der Zeit besser anpassen.

Der holografische Bereich ist weniger groß als ich dachte. Es ist ein Rechteck vor Ihren Augen, aber wenn Sie eine gute Seitensicht haben (wie ich), ist es etwas beunruhigend, da das Hologramm abgeschnitten wird, wenn Sie den Kopf bewegen.

Alles in allem ist es äußerst beeindruckend und ich kann es kaum erwarten, mich dafür zu entwickeln.”

Obwohl der Autor feststellt, dass das Gerät immer noch ein geringes Sichtfeld hat, scheint er von der Hardware insgesamt beeindruckt zu sein, was ein vielversprechendes Zeichen ist. Letztendlich wird AR ein leistungsfähigerer und flexiblerer Ersatz für VR sein - eine erstaunliche Technologie. Warum Virtual Reality-Technologie Sie in 5 Jahren umhauen wird Warum Virtual-Reality-Technologie Sie in 5 Jahren umhauen wird Die Zukunft von Virtual Reality umfasst Kopf-, Augen- und Ausdrucksverfolgung, simulierte Berührung und vieles mehr. Diese erstaunlichen Technologien stehen Ihnen in 5 Jahren oder weniger zur Verfügung. Weiterlesen . Die große Frage ist - wie weit sind wir weg?

Entwickler-Support

Obwohl dies im Ankündigungsvideo nicht erwähnt wurde, gab Microsoft bekannt, dass durch die Partnerschaft mit Unity auch die HoloLens in Unity, eines der am häufigsten verwendeten Tools für die Entwicklung von Indie-Spielen, vollständig unterstützt wird. Die Unterstützung umfasst die Möglichkeit, über die HoloLens zu rendern und auf verschiedene Weise Eingaben vom Gerät zu erhalten. Sowohl Unity Free als auch Unity Pro erhalten kostenlosen HoloLens-Support. Während die Integration noch nicht abgeschlossen ist, bietet Microsoft bereits auf der Build-Konferenz kurze Kurse mit den Prototypen der Unity-Integrationen an, um den Entwicklern einen ersten Einblick in das Coding für AR zu geben.

Dies ist ein willkommener, aber kein überraschender Schritt. Jede neue Plattform lebt oder stirbt von der Qualität des Startinhalts, und die HoloLens machen da keine Ausnahme. Außerdem hat sich Microsoft seit jeher den Beziehungen zu Entwicklern verpflichtet.

Prototyp-Fieber

Die HoloLens kommen langsam der kommerziellen Realität entgegen. Ich habe große Vorbehalte gegenüber einigen Einschränkungen der Hardware, aber das Gerät ist unbestreitbar cool. 8 Real-World-Anwendungen für Microsoft HoloLens 8 Real-World-Anwendungen für Microsoft HoloLens Microsoft-HoloLens ist cool, aber wofür werden Sie sie eigentlich verwenden? Wir haben die aufregendsten Möglichkeiten. Lesen Sie mehr, und so etwas wird eines Tages sehr nützlich sein. Freust du dich auf die HoloLens?? Hast du die Chance bekommen, einen auf der Konferenz auszuprobieren? Ich möchte nur eine virtuelle Fischschüssel? Lass es uns in den Kommentaren wissen!

Erfahren Sie mehr über: Microsoft, Virtual Reality, Windows 10.