Was ist Spatial Computing und warum verlässt die Schnittstelle den Bildschirm?

Vor vierzig Jahren hat sich die Art und Weise, einen Computer zu benutzen, im Wesentlichen kaum verändert. Wir betrachten ein beleuchtetes Rechteck und zeigen auf Dinge darin. Der Monitor wurde zum Notebook, zum Mobiltelefon, zur Uhr, aber die Metapher blieb dieselbe: eine 2D-Ebene, in der die Informationen leben und wir draußen sind.

Spatial Computing ist die Wette, dass diese Metapher ihre Grenzen erreicht hat. Die Idee ist einfach zu formulieren, aber schwer umzusetzen: Anstatt dass Informationen auf einem Bildschirm gefangen bleiben, leben sie im Raum um ihn herum, verankert in realen Objekten, Orten und Gesten. Der Computer ist kein Ort mehr, an den man schaut, sondern wird zu einer Ebene über der Welt, in der man bereits lebt.

Dieser Text ist eine Karte für diejenigen, die sich für Technologie entscheiden. Nicht um die Zukunft zu verkaufen, sondern um Strukturwandel und Fairplay zu trennen.

Was Spatial Computing wirklich bedeutet

Der Ausdruck leidet unter dem gleichen Problem wie „Cloud“ oder „Metaverse“: Er ist zu einem Dach für verschiedene Dinge geworden. Es lohnt sich, eine Arbeitsdefinition festzulegen.

Beim Spatial Computing handelt es sich um ein Computing, das den dreidimensionalen Raum versteht und verwaltet: wo Dinge sind, wie tief sie sind, wo man hinschaut, worauf man zeigt. Statt mit Koordinaten in einem Fenster arbeitet das System mit Koordinaten in der physischen Welt.

Dadurch werden Technologien zusammengeführt, die früher getrennt lebten. Computer Vision zur Erkennung der Umgebung. Tiefensensoren zur Entfernungsmessung. Augmented Reality zur Einblendung von Informationen in das, was Sie sehen. Hand- und Augenverfolgung als Ersatz für die Maus. Die lokale Verarbeitung ist schnell genug, um ohne merkliche Verzögerung reagieren zu können.

Der Punkt ist nicht, dass eines dieser Stücke isoliert ist. Es ist die Kombination beider im Dienste einer Idee: Die Schnittstelle hört auf, ein Objekt zu sein, das man in der Hand hält, und wird zu einer Eigenschaft der Umgebung.

Warum stört Sie der rechteckige Bildschirm?

Der 2D-Bildschirm ist nicht schlecht. Für bestimmte Aufgaben ist es außergewöhnlich: Lesen von dichtem Text, Vergleichen von Tabellenkalkulationen, Programmieren. In diesen Fällen besteht keine Dringlichkeit, es zu ersetzen, und wer dies verspricht, verkauft, ohne nachzudenken.

Das Problem tritt auf, wenn die Aufgabe selbst räumlich ist. Ein Techniker, der eine Maschine reparieren möchte, muss sich gleichzeitig die Maschine und das Handbuch ansehen, und das Handbuch befindet sich auf einem Tablet am nächsten Tisch. Ein Chirurg benötigt ein Untersuchungsbild, das auf den Körper des Patienten ausgerichtet ist, und nicht auf einem Bildschirm an der Wand. Ein Architekt möchte sich innerhalb des Projekts bewegen und es nicht mit dem Trackpad drehen.

In diesen Fällen stellt der rechteckige Bildschirm eine Herausforderung dar: die ständige Übersetzung zwischen dem, was auf dem Bildschirm ist, und dem, was in der Welt ist. Man blickt nach unten, verarbeitet, blickt nach oben und rekonstruiert im Geiste, wo es hingehört. Dieses Hin und Her ist ermüdend und fehleranfällig.

Das Versprechen des Spatial Computing besteht darin, diese Übersetzung zu eliminieren. Die Informationen erscheinen dort, wo sie hingehören: Die Anweisung schwebt auf der rechten Schraube, die Prüfung richtet sich nach dem richtigen Organ. Wenn es funktioniert, scheint es keine fortschrittliche Technologie zu sein, sondern offensichtlich. Es ist dieses „Offensichtliche“, das anzeigt, wann sich die räumliche Schnittstelle lohnt und wann es nur ein Effekt ist.

Was sich in der Art der Interaktion ändert

Das Verlassen des Bildschirms verändert den Grundvokabular der Nutzung. Maus und Tastatur setzen eine Ebene und einen Tisch voraus. Im Raum werden die Befehle zu Schauen, Zeigen, Sprechen und Aufnehmen.

Schauen wird zur Auswahl: Das System weiß, worauf Ihre Aufmerksamkeit gerichtet ist, und verwendet dies so, wie der Cursor die Mausposition verwendet. Aus einer Geste wird eine Aktion: Zur Bestätigung in die Luft kneifen, mit der Hand ein virtuelles Objekt ziehen. Die Stimme wird zum Befehl für das, was sonst durch Gesten mühsam wäre. Und der Kontext, wo Sie sich befinden, was Sie betrachten, was Sie gerade getan haben, wird Teil der Eingabe, nicht nur der Aufzeichnung.

Diese Änderung hat Kosten, die nur wenige erwähnen: Für räumliche Schnittstellen gibt es immer noch keine konsolidierten Konventionen. In 2D weiß jeder, was eine Schaltfläche, eine Bildlaufleiste oder ein Menü ist. Im Weltraum erfindet jeder Hersteller diese Gesten neu und der Benutzer muss sie neu erlernen. Es ist die Phase, in der sich der Desktop in den 80er Jahren befand. Vielversprechend, aber roh.

Wo es bereits real ist und wo es noch Demonstration ist

Es lohnt sich, ehrlich über das Praktikum zu sein. Vieles, was auf der Bühne gezeigt wird, ist eine kontrollierte Demonstration: richtige Beleuchtung, vorbereitete Umgebung, kurze Sitzungen. In der realen Welt gibt es schlechtes Licht, rutschende Brillen und leere Batterien.

Dennoch gibt es Inseln, auf denen Spatial Computing bereits messbaren Wert liefert, und das fast immer fernab des Verbrauchers. Industrie, Gerätewartung, Schulung zu gefährlichen Verfahren, medizinische Visualisierung, Architekturdesign. Das Muster ist klar: Umgebungen, in denen die Arbeit grundsätzlich räumlich ist, der Benutzer ein ausgebildeter Fachmann ist und der Gewinn die Kosten der Ausrüstung rechtfertigt.

Der Massenkonsument ist eine andere Geschichte. Hier ist das Hindernis nicht die zentrale Technologie, sondern alles drumherum: Gewicht, Autonomie, Preis und die soziale Barriere, den ganzen Tag etwas im Gesicht zu tragen. Diese Hindernisse sind real und können nicht durch einen weiteren Marketingzyklus beseitigt werden. Auf sie gehe ich ausführlich in den Texten zu Smart Glasses und Was nach dem Smartphone kommt] ein.

Wie eine Führungskraft das sehen sollte

Die falsche Frage lautet: „Wann tausche ich mein Firmenhandy gegen eine Brille ein?“ Die richtige Frage lautet: „Welche Aufgaben in meinem Unternehmen sind räumlich und zahlen heute die Steuer der Übersetzung auf den Bildschirm?“

Wenn Ihr Betrieb über Außendiensttechniker, komplexe Montage, Verfahrensschulung, physische Inspektion oder dreidimensionales Design verfügt, lohnt es sich, ihn genau zu überwachen und in einigen Fällen jetzt zu testen. Wenn Ihre Arbeit hauptsächlich aus Texten, Daten und Besprechungen besteht, ist räumliches Rechnen eine Frage der Beobachtung und nicht des Budgets.

Die Falle, die es zu vermeiden gilt, ist Faszination. Die meisten Augmented-Reality-Piloten sterben nicht aufgrund eines technischen Versagens, sondern weil sie mit der Technologie auf der Suche nach einem Problem begonnen haben und nicht mit einem Problem auf der Suche nach einer Lösung. Die Benutzeroberfläche wird vom Bildschirm verschwinden, aber nur an Stellen, an denen der Bildschirm nie der beste Ausgangspunkt war.