USDZ: So wichtig wie MP3 und HTML

Dies ist eine erste Substack-Ausgabe mit einer Audio-Spur / Podcast. Lets try. Eigentlich ist es die Tonspur eines meiner YouTube-Videos (Was ist / Wozu OpenUSD) zu dem gleichen Thema (ca. 20 Min. Video). Enjoy.

Feedback ist ERWÜNSCHT!

Ok, wer mag schon gerne über Dateiformate schreiben? Da denkt man sofort an *.ppt oder *.xls - Powerpoint und Excel. Aber es gibt auch weitere Abkürzungen, wie MP3 oder HTML, die unsere Welt verändert haben.

1982 kam MP3 in die Welt. Erinnert sich noch jemand an MP3-Player? Die Geschichte des Wandels der Musikbranche beruht zum Teil auf diesem Dateiformat. Napster, iTunes und der iPod führten die Transformation fort. Wegen eines Dateiformats!

Zehn Jahre später, 1992, wurde die erste Spezifikation von HTML auf den Weg gebracht. Dann kamen NetScape, die DotCom-Blase, Browser-War… studiVZ, WhatsApp, Facebook, Instagram und TikTok. Alles nur weil *.html existierte.

Ich hoffe, damit konnte ich Deine Befürchtungen, es gehe um ein „unwichtiges Dateiformat“ zerstreuen? Gut, dann nimm Dir jetzt eine Tasse Tee - oder Kaffee - und wir steigen tiefer ein.

Warum ein neues Dateiformat „fürs Internet“?

Dritte Dimension hört sich wie ein Science-Fiction Film an? Ganz so schlimm ist es nicht. Es geht um „Geld verdienen mit dem Internet“, um Pixar Animation Studios, den Machern von Toy Story, um #apple und sogar um das #Metaverse Standard Forum. Es wird wieder ein wilder Mix...

Immer mehr Informationen im Internet bestehen aus 3D-Daten: Schau Dir Plattformen wie Sketchfab oder das 3D-Druckportal Thingiverse an. Aber auch auf immer mehr herkömmlichen Websites wird 3D-Content über entsprechende Player eingebunden.

Video: Kleiner Überblick zu dem Thema 3D-Content auf der Website

So kann eine 3D-Datei einer Maschine nicht nur aus einer Richtung angesehen werden, sondern der Betrachter kann den Blickwinkel selbst bestimmen. Mehr Interesse, mehr Interaktionsmöglichkeiten, mehr Verweildauer. Alles Argumente FÜR mehr 3D-Content auf der Website. Damit man diese Inhalte nicht nur auf der Website betrachten kann, sondern sich direkt ins Homeoffice projizieren kann, gibt es unseren AR-Player.

Und was ist jetzt USD / *. usdz?

USD (Universal Scene Description) ist der Name der Spezifikation für das 3D-Dateiformat *. usdz - Siehe das Logo auf dem Titelbild. Eine solche 3D-Datei besteht aus den Angaben eines 3D-Modells in Form von Gitterlinien.

Die Linien ergeben Flächen, die mit einer Oberfläche, einer Textur, gefüllt werden. So entsteht aus einer Liste mit 3D-Koordinaten und einigen JPGs ein 3D-Modell. Solche einfachen Angaben kann auch das alternative Format *. glTF / *.glb verwenden.

Die USD-Story

Das Dateiformat USD wurde 2015 auf der SIGGRAPH vorgestellt, der Leitmesse für Computergrafik. Ein Mitarbeiter von Pixar, den Machern von Toy Story, kam auf die Bühne und schloss seinen handelsüblichen Gamer-Laptop an. Er gab eine Kommandozeile ein und ein paar Sekunden später war eine Szene aus dem Film „Findet Nemo“ zu sehen. Kein Video, sondern auf einem Laptop in Echtzeit und interaktiv navigierbar. Eigentlich war damit die Demo schon zu Ende…, aber der Vortragende schloss mit den Worten...

„Wir haben dieses hochperformante System und das Dateiformat in dieser Minute Open Source veröffentlicht!“

Natürlich wurde dann noch dieses neue System im Detail vorgestellt. USD hat seine Wurzeln in der Aufgabenstellung der Computergrafikbranche. Es gibt viele Softwaresysteme, die für die Produktion eines großen Spielfilms genutzt werden müssen. Und jeder hat seine eigenen Dateispezifikationen.

Ergo, es fehlte bisher ein zentrales Datenformat.

#Pixar hat aber nicht nur ein sehr effizientes 3D-Datenformat entwickelt, USD kann auch (…Scene Description) alle Angaben zu einer 3D-Animationsszene beinhalten - und Angaben zur Interaktion mit den Elementen in AR - eine OpenSource-Ergänzung von Apple.

Das ergibt eine einzige Datei für viele Anwendungszwecke: Von CGI- / Computergrafik- Filmen, wie Toy Story, über #augmentedreality und #virtualreality bis zum Metaverse - überall kann EIN Dateiformat genutzt werden.

Video: Meine „Wette auf USD", vor ca. einem Jahr veröffentlicht

Inzwischen setzt nicht nur Pixar diesen Standard ein, sondern fast alle 3D-Softwaresysteme können *. usdz verwenden. Dazu kommen Unternehmen wie Apple, deren gesamte AR- und VR-Technologie auf dem System basieren.

*.usdz, *. usda, *. usdc und *. reality

Nun noch noch kurz in die echten Tiefen der Dateiformate abgetaucht: Es gibt USD in verschiedenen Dateiversionen. USD ist generell ein Open Source-Standard, der Dateien mit den Endungen Z, A und C kennt.

• *. usdA = Ascii. Also reine Textdateien, die man mit einem Texteditor sogar lesen und bearbeiten könnte. Wenn man 3D-Schach mag, dann schaut man auch „von Hand“ in so eine Datei rein.
• *. usdC = Binär-Inhalte. Ohne spezielle Software nicht mehr lesbar.
• *. usdZ = Zip-Datei, kann als Container-Format sogar mehrere mehrere Szenen und auch nötige Texturen umfassen. Dies ist das gebräuchlichste Format für den Einsatz im Web und für AR.
• *. reality = Ein von Apple ergänztes Format, welches den Inhalt gegen Reverse Engineering schützt. Und es hat ein paar weitere Zusatzfunktionen, die bisher noch nicht OpenSource standardisiert wurden.

Omniverse - das Firmen-Metaverse von Nvidia

#Nvidia, der sicher eher als Grafikkartenhersteller bekannt geworden ist, hat fast zeitgleich mit Meta aka Facebook seine Version des Metaverse „für Unternehmen“ vorgestellt: #omniverse

Dieses System erlaubt es nicht nur, nette Räume für virtuelle Besprechungen zu gestalten, sondern sogar komplexe 3D-Modelle aus der Konstruktion (BIM / Digitaler Zwilling) zu diskutieren und bearbeiten.

Das Omniverse setzt ebenfalls auf USD!

Nvidia sagt sogar - die Zukunft des Internets ist nicht mehr HTML, sondern USD. (Ausschnitt aus einer Keynote mit deren CEO) Denn in Zukunft werde man durch 3D-Webseiten navigieren. Hört sich nach Science-Fiction an? Aber wir haben auch mobile Webseiten vor 15 Jahren als „kleine Ableger“ der normalen Websites für das Handy betrachtet. Bis Mobile-First die Regel wurde.

Ja, wir können schon heute USD-Inhalte in eine regulären Website einbinden. Mit AR-Portalen gelangt der Content dann ins Wohnzimmer, Homeoffice oder die Werkhalle. Beispiel von mir in diesem Video als ZWEITES Portal, zuerst gibt es die Marslandschaft und dann unser AR-Portal.

Video: Das zweite AR-Portal kannst Du mit einem iPhone oder iPad selbst ausprobieren.

Mehr zu den Themen a AR, VR und AV #AugmentedVirtuality gab es in der letzten Ausgabe des Newsletters: Synthesized Reality: Apples Masterplan für AR & VR.

Metaverse Standard Forum

Vor ein paar Wochen hat sich das Metaverse Standard Forum (MSF) gebildet. Als Agentur KreativeKK.de sind wir dort auch Mitglied (Bei der USD-Group sind wir schon seit längerer Zeit im Start). Das MSF hat es sich zur Aufgabe gemacht, einen plattformübergreifenden technischen Standard für das zukünftige Metaverse zu definieren. Und auch hier kommt USD als zentrales Dateiformat zum Einsatz.

Ausblick

Zurzeit wird gerade das USD-Format erweitert und mit der nächsten Fassung sind noch viele weitere Content-Ideen umsetzbar. Aber schon heute können wir ganze Websites in 3D oder AR / VR als Experience - umsetzen.

Du siehst: Es wird nur noch leichter!

Oder um (fast) zu zitieren...

Die Zukunft gehört den Dateiformat-Nerds.

Falls du Fragen hast, einfach einen Kommentar schreiben - ich stehe aber auch gerne „auf eine Tasse Tee“ für ein Gespräch zur Verfügung.

Viele Grüße aus Velbert,

Gerhard Schröder

PS: Kleinere und größere USD-Beispiele stelle ich auf meinem YouTube-Channel vor.

PSS: Der Text erschien vor fast einem Jahr als LinkedIn-Newsletter. Da diese Technologie immer wichtiger wird hier nun auch für meine Substack-Leser, denn Substack startete ich erst Monate nach dem LinkedIn-Newsletter.