Eine neue 30-minütige Präsentation von @aelluswamy, Teslas VP für KI, wurde veröffentlicht, in der er über FSD, KI und die neuesten Fortschritte des Teams spricht. Höhepunkte der Präsentation: • Die Fahrzeugflotte von Tesla kann jeden Tag 500 Jahre Fahrdaten bereitstellen. Fluch der Dimensionalität: • 8 Kameras mit hoher Bildrate = Milliarden von Tokens pro 30 Sekunden Fahrkontext. • Tesla muss die richtigen Korrelationen zwischen sensorischen Eingaben und Steuerungsaktionen komprimieren und extrahieren. Datenvorteil: • Tesla hat Zugang zu einem "Niagara Falls von Daten" — Hunderte von Jahren kollektiven Fahrens der Flotte. • Verwendet intelligente Datenauslöser, um seltene Randfälle zu erfassen (z. B. komplexe Kreuzungen, unvorhersehbares Verhalten). Qualität und Effizienz: • Extrahiert nur die wesentlichen Daten, die benötigt werden, um Modelle effizient zu trainieren. Debugging und Interpretierbarkeit: • Obwohl das System End-to-End ist, kann Tesla das Modell dennoch auffordern, interpretierbare Daten auszugeben: 3D-Belegung, Straßenbegrenzungen, Objekte, Schilder, Ampeln usw. • Abfragen in natürlicher Sprache: Fragen Sie das Modell, warum es eine bestimmte Entscheidung getroffen hat. • Diese zusätzlichen Vorhersagen steuern das Auto nicht, helfen jedoch Ingenieuren beim Debuggen und der Gewährleistung der Sicherheit. Teslas fortschrittliches Gaussian Splatting (3D-Szenenmodellierung): • Tesla hat ein maßgeschneidertes, ultraschnelles Gaussian-Splatting-System entwickelt, um 3D-Szenen aus begrenzten Kamerasichtwinkeln zu rekonstruieren. • Erzeugt klare, präzise 3D-Darstellungen selbst aus wenigen Kamerawinkeln — weit besser als Standard-NeRF/Splatting-Ansätze. • Ermöglicht schnelles visuelles Debugging der Fahrumgebung in 3D. Bewertung & Weltmodelle: • Die Bewertung ist die größte Herausforderung: Modelle können offline gut abschneiden, aber in realen Bedingungen versagen. • Tesla erstellt ausgewogene, vielfältige Bewertungsdatensätze, die sich auf Randfälle konzentrieren — nicht nur auf einfaches Fahren auf der Autobahn....