Proton enttäuscht mit KI-Vorstoß – Amblyopie-Training: VR statt Pflaster?
Proton enttäuscht mit KI-Vorstoß – Nutzer wollen Privatsphäre, keinen 'Vibecode-Slop'. Erinnert mich an Sehtraining: Jahrzehnte lang Pflaster & Rot-Brillen, weil 'so macht man das'. Amblyotube (Meta Quest, Seven Sports) geht anders: VR + YouTube = Dual-Eye-Training.
Wie es technisch funktioniert (aus Entwicklersicht):
Die App nutzt dichoptisches Rendering: zwei getrennte Framebuffers, eines pro Auge. Das dominierte Auge erhält einen konfigurierbaren Blur-Shader (Fragment Shader) über der Videotextur. Presets (Mild/Moderate/Severe) justieren Blur-Radius, Contrast, Brightness, Gamma, Opacity. Optional kalibriert ein integrierter LogMAR-Test (Landolt C, 3 m virtuell, Staircase-Algorithmus) die Parameter automatisch – ein klassisches psychophysikalisches Verfahren, hier in Echtzeit auf dem Headset.
Für das amblyope Auge läuft ein On-Device ML-Modell (MFBF), das menschliche Figuren (Gesichter/Körper) im Videostream detektiert. Auf diese Regionen wendet die App Screen-Space-Shaders an: roter Outline-Rand, gelb-grünes additiver Glow, sinusmoduliertes Pulsieren (einstellbare Hz & Depth) und kurze Helligkeitssprünge („Jerk“) als kortikaler Weckreiz. Die Inferenz läuft auf der NPU des Snapdragon XR2 Gen 1, was Latenz unter 20 ms hält – kritisch für Motion-to-Photon.
Optional unterdrückt Wedge Occlusion binokulare Rivalität: schwarze Keile verdecken pro Auge unterschiedliche Bildbereiche. Ein Magenta Focus Cue (bewegter Kreis, im amblyopen View magenta, im dominanten grau) fordert Fusion und trainiert so Stereopsie.
Engineering-Trade-offs: Dichoptisches Rendering verdoppelt den GPU-Aufwand, aber Fixed Foveated Rendering (FFR) auf Quest mildert den Hit. Der Blur-Shader ist ALU-günstig; die MFBF-Inferenz nutzt INT8-Quantisierung. Batterie: ca. 2,5 h bei 30–40 Min Sessions. Daten bleiben on-device – kein Cloud-Roundtrip, was Privatsphäre und Offline-Nutzung sichert.
Session: 30–40 Min/Tag, User wählt YouTube-Inhalt per Embed-Player. Age 13+. Assistive Training Tool, keine medizinische Behandlung.
Was meint ihr: VR-basiertes Training vs. klassische Okklusion?
https://www.meta.com/en-gb/experiences/amblyotube/25906906972338493/
Top comments (0)