In Bereichen wie Psychologie, Kognitionswissenschaft, Gesundheitswesen, Bildung, Einzelhandel, Immobilien und Tourismus verändert die Blickverfolgungstechnologie die Art und Weise, wie wir menschliche Aufmerksamkeit und Verhalten verstehen. Durch die Analyse der Augenbewegungen einer Person wird aufgedeckt, wohin sie blickt, wie lange sie blickt und in welcher Reihenfolge ihr Blick wandert. Diese Daten sind von erheblichem Wert für die Benutzererlebnisforschung, die Bewertung der Werbewirksamkeit, die Überwachung der Fahrersicherheit und sogar für die Früherkennung von Autismus.
Für Hersteller von VR-Headsets, die eine hochwertige Blickverfolgung in ihre Geräte integrieren, ist ein Kameramodul unerlässlich, das Mikrobewegungen des Auges präzise erfassen, schnell fokussieren und hochauflösende Bilder liefern kann. VR-Headsets verfügen über extrem begrenzten internen Platz, arbeiten unter wechselnden Lichtverhältnissen (von Umgebungslicht bis zum dunklen Inneren des Headsets) und erfordern eine Echtzeitverarbeitung großer Bilddatenmengen.Die Bildqualität, die Fokussiergeschwindigkeit, die Auflösung und die Schnittstellenstabilität des Kameramoduls wirken sich direkt auf die Genauigkeit der Blickverfolgung und das gesamte Benutzererlebnis aus.
Im Gegensatz zu Standardkameras unterliegen die für die Blickverfolgung verwendeten Kameras einer Reihe anspruchsvoller Anforderungen:
Ultrahohe Auflösung:Muss feine Merkmale wie Irisstruktur, Pupillenränder und Hornhautreflexionspunkte klar erfassen. Eine höhere Auflösung führt zu einer höheren Verfolgungsgenauigkeit.
Schneller Autofokus:Die Entfernung zwischen dem Auge des Benutzers und der Kamera kann sich mit der Passform des Headsets geringfügig ändern. Der Autofokus stellt sicher, dass das Auge durchgehend scharf bleibt.
Optik mit geringer Verzerrung:Verzerrungen können die Form des Auges verzerren und die Genauigkeit der Blickpunktberechnung beeinträchtigen.
Einheitliche Vollbildabbildung:Sowohl die Mitte als auch die Ränder müssen eine hohe Auflösung beibehalten, da das Auge überall im Bild erscheinen kann (z. B. beim seitlichen Blick).
Kompakte Größe:Der Platz in einem VR-Headset ist begrenzt; das Modul muss klein genug sein, um nahtlos integriert zu werden.
Hochgeschwindigkeits-Schnittstelle:Echtzeit-Tracking erfordert eine latenzarme Übertragung von hochauflösenden Bildern, was die MIPI-Schnittstelle zur idealen Wahl macht.
Basierend auf unserem Verständnis von Smart-Hardware- und Computer-Vision-Anwendungen ist ein MIPI-Kameramodul das für die Blickverfolgung in VR-Headsets wirklich geeignet ist, eine präzise Ausrichtung von Sensor, Optik, Fokus und Schnittstelle erfordert.
Algorithmen zur Blickverfolgung basieren typischerweise auf drei Schlüsselmerkmalen: Pupillenränder, Irisstruktur und Hornhautreflexionen (Purkinje-Bilder). Wenn die Auflösung unzureichend ist, werden diese feinen Strukturen verschwommen, was zu erhöhten Fehlern bei der Blickpunktberechnung führt.
MIPI 4-Lane Hochgeschwindigkeits-Schnittstelle: Latenzarme Übertragung riesiger DatenmengenUHD-Kameramodul basiert auf dem IMX576 CMOS-Sensor (1/2,7 Zoll, COB-Gehäuse). Seine wichtigsten Spezifikationen:
Effektive Pixelanzahl: 5760(H) x 4312(V) – etwa 24 Megapixel (24MP). Dies ist eines der MIPI-Kameramodule mit der höchsten Auflösung. Im Vergleich zu gängigen 2MP- oder 5MP-Modulen liefert 24MP 4- bis 12-mal mehr Details und kann subtile Irisstrukturen, präzise Pupillenrandpositionen und winzige Hornhautreflexionspunkte klar erfassen.
24MP UHD-Ausgabe:Unterstützt Ultra-High-Definition-Bildausgabe und erfüllt die extremen Klarheitsanforderungen von Blickverfolgungsalgorithmen. Selbst bei schnellen Sakkaden erfasst es scharfe Bilder für die anschließende Analyse.
In einem VR-Headset beträgt der Abstand zwischen dem Auge des Benutzers und der Kamera typischerweise 2-5 cm. Bei dieser Entfernung bedeutet eine Auflösung von 24MP, dass die physikalische Größe, die ein Pixel darstellt, nur wenige Mikrometer betragen kann – ausreichend, um Pupillenverschiebungen im Submillimeterbereich aufzulösen.
Beim Tragen eines VR-Headsets variieren der Pupillenabstand und die Augenwölbung je nach Benutzer, und das Headset kann sich während der Bewegung leicht verschieben. Bei einer Kamera mit Festfokus können die Augen einiger Benutzer außerhalb der Schärfentiefe liegen, was zu unscharfen Bildern führt.
MIPI 4-Lane Hochgeschwindigkeits-Schnittstelle: Latenzarme Übertragung riesiger DatenmengenCMOS-Kameramodul integriert einen HBM Closed-Loop Voice Coil Motor (VCM), gesteuert durch den CN3927E-Treiberchip, der einen Autofokusbereich von 10 cm bis unendlich unterstützt. Seine Vorteile:
Closed-Loop-Steuerung:Im Gegensatz zu Open-Loop-Motoren verwendet der Closed-Loop-Motor Hall-Sensoren für Echtzeit-Feedback der Linsenposition, was eine schnellere und präzisere Fokussierung ermöglicht. Dies ist entscheidend für die Erfassung schneller Augenbewegungen wie Sakkaden und Verfolgungen.
Dynamische Stabilität:Wenn sich VR-Headsets während des Spielens oder immersiver Erlebnisse bewegen, stimmt der Closed-Loop-Motor den Fokus kontinuierlich ab und hält das Auge scharf.
10 cm Mindestfokus:Passt perfekt zur geringen Arbeitsentfernung zwischen Kamera und Auge im VR-Headset.
Bei Blickverfolgungsanwendungen bestimmt die Fokussiergeschwindigkeit direkt, ob das System die
Blickverschiebungen erfassen kann. Die Millisekunden-Reaktion des HBM Closed-Loop-Motors stellt sicher, dass jeder Frame nutzbar ist.
Optisches System: Geringe Verzerrung & Einheitliche Vollbildauflösung
Algorithmen zur Blickverfolgung berechnen die Blickrichtung basierend auf den relativen Positionen von Hornhautreflexionen und dem Pupillenzentrum. Wenn das Bild verzerrt ist, wird die Form des Auges verzerrt, die Reflexionspunkte verschieben sich und die Berechnungsergebnisse leiden unter systematischen Fehlern.Das optische System dieses Moduls ist speziell optimiert:Brennweite: 3,95 mm, was auf dem 1/2,7-Zoll-Sensor ein
Sichtfeld von 78,1° ergibt. Dieses Feld deckt den gesamten normalen Rotationsbereich des Auges ausreichend ab.
Große Blende F1.8:Ermöglicht eine ausreichende Lichtaufnahme, wodurch auch in der relativ dunklen Umgebung eines VR-Headsets höhere Verschlusszeiten aufrechterhalten werden können, was Bewegungsunschärfe reduziert.Verzerrung
<1%:Streng auf unter 1 % begrenzt, um eine genaue Augenform für präzise Blickpunktberechnungseingaben zu gewährleisten.
Die Auflösungsdifferenz zwischen Zentrum und Rand ist speziell optimiert. Standardobjektive haben oft scharfe Zentren und unscharfe Ränder, aber bei der Blickverfolgung kann das Auge überall im Bild erscheinen (insbesondere am Rand bei seitlichen Blicken). Eine einheitliche Vollbildabbildung stellt sicher, dass der Tracking-Algorithmus klare Merkmale erhält, unabhängig von der Blickrichtung.
MIPI 4-Lane Hochgeschwindigkeits-Schnittstelle: Latenzarme Übertragung riesiger DatenmengenDas Datenvolumen von Bildern mit 24MP Auflösung ist enorm. Bei Verwendung einer Standard-Schnittstelle könnte die Übertragung eines einzelnen unkomprimierten Frames Hunderte von Millisekunden dauern, was die Anforderungen an die Echtzeit-Blickverfolgung (typischerweise 60 Bilder pro Sekunde oder höher) nicht erfüllt.Dieses 24MP-Kameramodul verwendet eine
MIPI 4-Lane Hochgeschwindigkeits-Schnittstelle
, wobei jede Lane Raten von über 1,5 Gbit/s erreichen kann, was eine Gesamtbandbreite von über 6 Gbit/s bietet. Das bedeutet:
Reibungslose Übertragung von 24MP-Videostreams mit voller Auflösung (mit entsprechender Bildratensteuerung), die den Bandbreitenbedarf für Echtzeit-Tracking erfüllt.
Starke Fähigkeit zur Unterdrückung von Störungen durch Differenzsignale, geeignet für die komplexe elektromagnetische Umgebung in VR-Headsets (mit Display-Treibern, Funkmodulen usw. als Störquellen).
Zuverlässigkeit: Zugeschnitten auf tragbare Consumer-GeräteVR-Headsets sind alltägliche Unterhaltungselektronik, die Stürzen, Vibrationen und Temperaturschwankungen ausgesetzt ist. Dieses Modul verfügt über strukturelle Optimierungen:
COB-Gehäuse (Chip on Board):Der nackte Chip wird direkt auf der Leiterplatte montiert, was die Moduldicke reduziert und die Stoßfestigkeit verbessert.
Gewährleistet eine zuverlässige Übertragung von Steuerbefehlen und vereinfacht die Systemintegration.Anwendungsszenarien: Von VR/AR bis hin zu multidisziplinärer Forschung
1. VR/AR-Headset-Blickverfolgung:Integriert in VR-Headsets für Foveated Rendering (Reduzierung der GPU-Last) und augenbasierte Interaktion (z. B. Auswahl von Menüpunkten allein durch Hinsehen).
2. Psychologie & Kognitionswissenschaftliche Forschung:Hochpräzise Blickverfolgung in Laboren zur Untersuchung von Aufmerksamkeitsmechanismen, Leseverhalten, Entscheidungsprozessen usw.
3. Gesundheitswesen:Zur Früherkennung von Autismus (atypische Blickmuster), Diagnose neurologischer Störungen (Beeinträchtigungen der Augenbewegung) und Beurteilung der Rehabilitation von Hirnverletzungen.
4. Einzelhandel & Marketing:Analyse der Blickbahnen von Verbrauchern in Regalen zur Optimierung von Produktplatzierung und Verpackungsdesign.
5. Bildung & Training:Erfassung der Aufmerksamkeitsverteilung von Lernenden zur Bewertung der Wirksamkeit von Lehrmaterialien.
Analyse visueller Hotspots in virtuellen Showrooms oder touristischen Werbevideos zur Optimierung des Content-Designs.Aufbau eines zuverlässigen "visuellen Kerns" für BlickverfolgerDer Kernwert der Blickverfolgungstechnologie liegt in der "Aufdeckung visueller Aufmerksamkeit". Und der Ausgangspunkt für all dies ist ein Kameramodul, das mit 24MP Ultrahoher Auflösung, HBM Closed-Loop Autofokus,
<1% geringer Verzerrung, einheitlicher Vollbildauflösung und einer MIPI-Hochgeschwindigkeits-Schnittstelle
