Widget

Mojo Vision bringt seine Eye-Tracking-, Display-fähigen Kontaktlinsen der Realität einen Schritt näher

Eine Reihe von Pop-up-Richtungsmarkierungen erscheinen in winzigen grünen Linien in meinem Blickfeld. Als ich mich umdrehe, kann ich sehen, in welche Richtung Norden ist. Dies sind Markierungen auf einem Kompass, die auf ein kleines MicroLED-Display projiziert werden, das auf einer Kontaktlinse sitzt und an einem Stab vor mein Auge gehalten wird.

Das Mojo-Objektiv, ein in sich geschlossenes Display-fähiges Objektiv, das ich zuvor ausprobiert habe eine frühere Iteration vor der Pandemie auf der CES 2020, ist zurück in einer Form, die nach Angaben des Unternehmens endlich für interne Tests bereit ist.

Ich habe Mojo Visions neuestes Prototypobjektiv vor einigen Wochen in einem Bürogebäude in Midtown Manhattan getestet, als sich das Unternehmen auf seine nächste Phase der internen Entwicklung vorbereitete. Während die Kontaktlinsen von Mojo immer noch nicht für den täglichen Gebrauch zugelassen sind, sind diese Linsen ein weiterer Schritt auf dem Weg und stellen das vollständige Technologiepaket des Unternehmens für das dar, was in Version 1.0 enthalten sein wird.


Läuft gerade:
Schau dir das an:

Mojo Vision gab mir einen Einblick in Eye-Tracking-Displays in…


9:09

Die Technologie von Mojo Vision ist gewissermaßen Augmented Reality. Aber nicht so, wie Sie vielleicht denken. Das monochrome grüne Display der harten Linse kann Text, einfache Grafiken und sogar einige Illustrationen anzeigen, ist aber so konzipiert, dass es eher wie eine Smartwatch funktioniert. Der Beschleunigungsmesser, das Gyro und das Magnetometer des Objektivs geben ihm auch etwas, was ich vorher nicht ausprobieren konnte: Augenverfolgung.

mojo-vision-ar-kontaktlinse-14

Die Anzeige des Objektivs ist der grüne Punkt in der Mitte. Das ist es. Der Ring aus Hardware an den Rändern sind die Bewegungsverfolgung und andere Chipkomponenten.

Richard Peterson/CNET

Eine Welt in deinen Augen

Im Gegensatz zur Eye-Tracking-Technologie in VR- und AR-Brillen, bei der Kameras die Augenbewegung erfassen, folgen diese Linsen der Augenbewegung, indem sie tatsächlich auf Ihrem Auge sitzen. Laut den Führungskräften von Mojo Vision können die Sensoren, wie auf einer Smartwatch, diese Bewegung genauer berechnen als VR- oder AR-Brillen. Ich habe diese eigentlich nicht in meinen Augen getragen, da die Linsen noch nicht zum Tragen freigegeben sind. Ich hielt die Linse sehr nahe an mein Auge und bewegte meinen Kopf herum, um den Tracking-Effekt zu sehen.

Als ich das Objektiv von Mojo im Jahr 2020 ausprobierte, war es eine Version, die weder über die integrierte Bewegungsverfolgungstechnologie noch über Batterien verfügte. Die neue Version verfügt über ein Batteriearray, Bewegungsverfolgung und drahtlose Konnektivität mit kurzer Reichweite.

Aber das Objektiv ist kein eigenständiges Gerät; Eine benutzerdefinierte drahtlose Verbindung kommuniziert direkt mit einem zusätzlichen um den Hals getragenen Gerät, das Mojo als Relais bezeichnet und das als Begleitcomputer für die Linsen fungiert. Ich habe diesen Teil der Mojo Vision-Hardware nicht gesehen, nur die Linsen.

mojo-vision-ar-kontaktlinse-1066471

Die Linsen sind so konzipiert, dass sie sich drahtlos mit einem lokalen Gerät verbinden, wobei Bewegungsverfolgung und Anzeigeelemente auf der Linse selbst verbleiben.

Richard Peterson/CNET

Die Objektive lassen sich derzeit nicht direkt mit Telefonen verbinden, da die Objektive eine energieeffizientere drahtlose Verbindung mit kurzer Reichweite benötigen. „Bluetooth LE war zu gesprächig und leistungshungrig“, sagt Steve Sinclair, SVP of Product bei Mojo Vision, der mich durch die neuesten Demos führte. “Wir mussten unsere eigenen erstellen.” Die drahtlose Verbindung von Mojo Vision liegt im 5-GHz-Band, aber Sinclair sagt, dass das Unternehmen noch einiges zu tun hat, um sicherzustellen, dass die drahtlose Verbindung keine Störungen empfängt oder verursacht.

“Ein Telefon hat nicht das Funkgerät, das wir brauchen”, sagt Sinclair. „Wegen der Sendeleistung des Objektivs muss es etwas nah am Kopf sein.“ Er sagt, die Technologie könnte in einen Helm oder sogar in eine Brille eingebaut werden, aber im Moment sei ein Gerät vom Typ Nackenbügel am praktischsten.

Idealerweise strebt Mojo in Zukunft Verbindungen mit größerer Reichweite an. Der am Hals getragene Prozessor kann jedoch eine Verbindung zu Telefonen herstellen. Es zieht GPS von Telefonen ab und verwendet das Modem des Telefons für die Konnektivität, wodurch dieses Nackenband zu einer Brücke wird.

mojo-vision-ar-kontaktlinse-13

Wie ich durch die Linse schaute und meinen Kopf herumdrehte. Nicht ganz dasselbe wie das Tragen eines, aber so nah wie möglich für den Moment.

Richard Peterson/CNET

Navigieren in einer winzigen Benutzeroberfläche

Meinen Kopf zu heben und sich mit einer Linse an einem Stäbchen vor meinem Gesicht im Raum umzusehen, ist nicht dasselbe wie das Tragen einer Eye-Tracking-, Display-fähigen Kontaktlinse. Auch nach dieser Demo bleibt die tatsächliche Erfahrung, die Kontaktlinsen von Mojo Vision in freier Wildbahn zu tragen, ein Unbekannter. Aber selbst im Vergleich zu meiner letzten Mojo-Demo im Januar 2020 fühlt sich das Erlebnis viel realer an, wenn ich sehe, wie die Benutzeroberfläche auf dem Objektiv funktioniert.

In vielerlei Hinsicht erinnert es an eine intelligente Brille namens Focals, die von North, einem Unternehmen, hergestellt wird Google übernommen im Jahr 2020. North Focals projizierte ein kleines LED-Display ins Auge, das wie eine winzige Anzeige funktionierte, aber kein Eye-Tracking hatte. Ich kann sehen, wie ein Blick in die Linse Informationen hervorbringen kann, ähnlich wie bei einer Smartwatch auf meinem Kopf oder ähnlichem Google Brille… außer auch anders. Das helle Display hängt wie geätztes Licht in der Luft und verschwindet dann.

Ich sehe eine ringförmige Oberfläche, etwas, das ich 2020 auf einem Eye-Tracking simuliert gesehen habe Vive Pro VR-Headset bei meinem letzten Besuch bei Mojo Vision in Las Vegas. Ich kann ein kleines Absehen sehen, das auf kleinen App-Symbolen rund um den Ring landet, und wenn ich ein paar Sekunden auf einem bleibe, wird es geöffnet. Der Ring um die Peripherie meiner Sicht bleibt unsichtbar, bis ich zu den Rändern hinüberschaue, wo App-ähnliche Widgets erscheinen.

Ich sehe eine Reise-App, die das Abrufen von Fluginformationen simuliert, und eine winzige Grafik, die anzeigt, wo mein Sitzplatz ist. Ich kann zu anderen Fenstern hinüberblicken (meine Uber-Fahrtinformationen, mein Gate). Ein weiteres App-ähnliches Widget zeigt, wie es aussehen würde, wenn Pop-up-Fitnessdaten auf dem Display angezeigt würden (Herzfrequenz, Rundeninformationen, wie eine Smartwatch-Anzeige). Ein weiteres Widget zeigt Bilder: Ich sehe ein kleines Baby Yoda (aka Grogu), gerendert in Grüntönen. Außerdem eine klassische Star Wars-Aufnahme von Han Solo. Diese Bilder zeigen, dass das Display gut genug aussieht, um Bilder anzuzeigen und Text darauf zu lesen. Ein anderer, ein Teleprompter, rollt Text ab, den ich laut vorlesen kann. Wenn ich von den Apps wegschaue, zurück zum äußeren Ring, verschwindet die Heads-Up-Info wieder.

Es ist nicht einfach herauszufinden, wie man sich genau richtig bewegt, aber ich probiere diese Objektive nicht einmal so aus, wie sie beabsichtigt sind. In meinen Augen würden sie sich bewegen, wenn sich meine Augen bewegen, und die Schnittstelle direkt steuern. Außerhalb meiner Augen muss ich meinen Kopf auf und ab neigen. Mojo Vision verspricht, dass sich das Display durch das Erlebnis auf dem Auge noch präsenter anfühlt und mein Sichtfeld ausfüllt. Es macht Sinn, da ich das Display etwas von meinem Auge halte. Das Display des Objektivs soll genau dort sitzen, wo sich meine Pupille befinden würde, und sein schmales Anzeigefenster richtet sich nach dem Bereich, in dem sich die Fovea, der detailreichste Teil unseres Sehzentrums, befinden würde. Ein Blick zurück aus dem Ring soll eine App schließen oder eine andere öffnen.

mojo-vision-zeitleiste

Die nächste Version der Linse zielt auf ein irisähnliches kosmetisches Design plus Sehstärke ab.

Scott Stein/CNET

Nächster Schritt: Tatsächliches Tragen; dann Rezepte

Das Mojo Vision-Objektiv, das ich mir gerade ansehe, hat definitiv mehr integrierte Hardware als die 2020-Version, die ich zuvor gesehen habe, aber es ist noch nicht alles vollständig aktiviert. „Es hat ein Radio, es hat ein Display, es hat drei Bewegungssensoren, es hat eine Menge eingebauter Batterien und das Power-Management-System. Es hat all diese Dinge drin“, erzählt mir Sinclair. Aber das Stromversorgungssystem am Objektiv wurde noch nicht aktiviert, um im Auge zu arbeiten. Stattdessen ist das Objektiv jetzt an einer kleinen Armhalterung befestigt, die ich halte, während es mit Strom versorgt wird. Im Moment verwende ich in der Demo, die ich versuche, den drahtlosen Chip, um Daten auf und von der Linse zu ziehen, damit sie angezeigt werden können.

Das Mojo-Objektiv verfügt über einen kleinen Arm Core M0-Prozessor auf dem Objektiv selbst, der verschlüsselte Daten verarbeitet, die auf und außerhalb des Objektivs laufen, sowie die Energieverwaltung. Der Computer mit Nackenband führt die Anwendungen aus, interpretiert Eye-Tracking-Daten und aktualisiert die Bildplatzierung in 10-Millisekunden-Schleifen. Während die Grafikdaten in gewisser Weise nicht intensiv sind (es handelt sich um einen Inhalt mit einem Durchmesser von 300 Pixeln, sagt Sinclair), muss der Prozessor diese Daten schnell und zuverlässig aktualisieren. Wenn die Dinge nicht mehr synchron sind, kann es auf einem Augapfel ziemlich schnell desorientierend werden.

mojo-lens-entwicklungszeitleiste-1

Der Zeitplan des Unternehmens für Linsenprototypen. Ich habe das letzte Mal das Modell 2019 (auf einem Stick) ausprobiert.

Mojo Vision

Drew Perkins, CEO von Mojo Vision, wird die Linse zuerst im Auge tragen. Dann die anderen Führungskräfte des Unternehmens, sagt Sinclair, und irgendwann danach der Rest ihres Führungsteams. Die Firmen Fitness- und Sportpartnerschaften Anfang dieses Jahres angekündigt, sollen einige frühe Tests ermöglichen, um zu sehen, wie die Linsen mit Fitness- und Sporttrainingsanwendungen funktionieren könnten.

Mojo Vision arbeitet auch daran, dass diese Linsen als medizinisch zugelassene Sehhilfen funktionieren, aber diese Schritte könnten noch weiter in der Zukunft liegen. „Wir könnten uns vorstellen, dass Benutzer mit geringem Sehvermögen eine zweite Kamera mit höherer Auflösung in einer Brille eingebaut oder über ihrem Ohr hängen haben – sie schauen auf etwas und es wird ein wirklich hochauflösendes Bild aufgenommen, und dann erscheint es einfach in ihren Augen , und dann können sie schwenken und zoomen und Dinge sehen”, sagt Sinclair über die Zukunft. Mojo Vision ist noch nicht da, aber das Testen dieser tragbaren Mikrodisplays mit Blickverfolgung wird der Anfang sein.

Außerdem benötigen diese Linsen eine FDA-Zulassung als Kontaktlinsen, ein Prozess, an dem Mojo Vision arbeitet. Sie müssen auch in verschiedenen Rezepten hergestellt werden, und das Unternehmen beabsichtigt, die Chip-Hardware mit einer künstlichen Iris abzuschirmen, damit die Linsen normaler aussehen.

„Wir müssen noch daran arbeiten, daraus ein Produkt zu machen. Es ist kein Produkt“, betont Sinclair, wo die Mojo Vision-Linsen stehen. Ich wäre ziemlich nervös, wenn ich die erste Person wäre, die diese Linsen im Auge testen würde, aber warum sollte ich es nicht sein? Diese Art von Technologie hat es noch nie gegeben. Ich kenne nur eine andere Firma, InMitarbeitet an intelligenten Kontaktlinsen. Ich habe noch nie Demos gesehen, wie diese konkurrierenden weichen Linsen funktionieren, und diese scheinen noch keine Displays zu haben. Die Grenze zu winzigen tragbaren Displays lässt zuvor hochmoderne Smart Glasses im Vergleich dazu altmodisch erscheinen.

About the author

vrforumpro

Leave a Comment