Disneys "Magic Bench" versetzt Sie in das Bild mit animierten Figuren

Eine neue "Magic Bench" von Disney Research ermöglicht es Ihnen, mit liebenswerten Zeichentrickfiguren zu interagieren - und es sind keine speziellen Brillen oder Headsets erforderlich.

Stattdessen wird die gesamte Umgebung - der Sitz, der Sitzende und die humanoiden Zeichentrickfiguren - auf einem Bildschirm gegenüber der Bank gespiegelt, so dass andere die Szene beobachten können.

Wie funktioniert die Illusion? Eine Kamera und ein Sensor erfassen Bilder und sammeln Tiefeninformationen über physische Objekte - die Bank und die Person -, die Algorithmen in die 3D-Animationen integrieren, schreiben die Forscher in einer Studie. Die in die Bank eingebauten haptischen Sensoren liefern Vibrationen, die mit animierten Aktionen auf dem Bildschirm synchronisiert werden. Dadurch entsteht die Illusion, dass die animierten Figuren neben dem Benutzer den realen Raum einnehmen. [10 Technologien, die dein Leben verändern werden]

"Unser Mantra für dieses Projekt war: Hören Sie eine Figur kommen, sehen Sie, wie sie den Raum betritt, und fühlen Sie, wie sie neben Ihnen sitzen", sagte Moshe Mahler, leitender Digitalkünstler bei Disney Research.

Augmented-Reality überlagert animierte Elemente in Ansichten der realen Welt, typischerweise mit speziellen optischen Geräten oder mobiler Technologie. Eine seiner Einschränkungen besteht jedoch darin, dass seine Illusion nur von einem einzigen Benutzer wahrgenommen werden kann. Die Magic Bench ermöglicht es Gruppen von Menschen, sich in einer einzigen Umgebung zu versammeln und gemeinsam an einer Augmented-Reality-Erfahrung teilzunehmen, alles gleichzeitig, so die Autoren der Studie.

Das Sitzen auf der Bank löst die Augmented-Reality-Erfahrung aus und führt einen Charakter in die Szene ein. In einer Videodemonstration kommt ein kleiner Cartoon-Esel in Sicht und tritt auf die Bank, erzeugt einen scharfen Ton und lässt die sitzende Person in Überraschung springen. Ein weiterer Test zeigt zwei Menschen auf der Bank, die reagieren, wenn sie "fühlen", wie ein animiertes Kaninchen neben ihnen aufspringt und auf und ab springt. Wenn ein Benutzer seine Hand über den Hasen legt, bewegt sich ein Schatten über seinen Kopf - als würde er denselben physischen Raum einnehmen wie die Person daneben.

Die Forscher nutzten die Echtfarbenkamera und die Tiefen- und Farbsensoren in einem Microsoft Kinect, um die reale Szene der Magic Bench und die Person (oder Personen) darauf zu erfassen. Durch den Neuaufbau in 3D wird die Bank zwischen Vorder- und Hintergrund verschoben, die dann mit wunderlichen Charakteren besetzt werden kann. Aber die Disney-Ingenieure entdeckten, dass, wenn die rekonstruierte 3D-Szene in einem Winkel betrachtet wurde, fehlende Daten und ein kleiner Unterschied in der Ausrichtung zwischen der Kamera und dem Sensor Lücken im Bild erzeugten, die als "Tiefenschatten" bekannt sind.

Um diese Tiefenschatten zu eliminieren, schichteten die Designer ein weiteres Element in die Szene ein - einen 2D-Hintergrund, der von der Kinect RGB-Kamera aufgenommen wurde und sich nahtlos an die Szene anpasste, wenn man sie frontal betrachtete, schrieben die Autoren der Studie. Sobald die "Bühne" festgelegt ist, kann sie mit animierten Co-Stars geteilt werden - von Elefanten, die eine leuchtende Kugel anbieten, bis hin zu einer Giraffe, die bei einem plötzlichen Nieselregen einen Regenschirm abgibt.

Techniker von Disney Research präsentierten die Magic Bench auf der SIGGRAPH 2017, einer jährlichen Konferenz und Ausstellung über Computergrafik und interaktive Techniken, die vom 30. Juli bis 3. August in Los Angeles stattfand.

Lassen Sie Ihren Kommentar