Schulabbrecher aus der Gymnasium dringt in OpenAI ein: lehnt Vibe Coding ab und macht sich mit ChatGPT selbständig weiterbilden, um schließlich zum Forschungsingenieur im Sora - Team aufzusteigen.
Code zeilenweise lesen und "Vibe Coding" ablehnen, Mathematik, Diffusionsmodelle usw. rückwärts über ChatGPT lernen. Dieser OpenAI-Forschungswissenschaftler, der an Sora beteiligt ist, hat den Videogenerierungsaufbau auf die wildeste Art und Weise erfolgreich umgesetzt.
In der Sora-Team von OpenAI gibt es einen so "un-silicon valley"-artigen Forschungswissenschaftler: Er hat die High School abgebrochen, hat kein Hochschulabschluss, keine Wettbewerbserfahrung und ist auch kein Vibe Coder, der nur mit KI Code zusammenklebt.
Er kommt aus einer kleinen Stadt in Schweden und hat die Schule noch vor Abschluss der High School verlassen. Damals konnte er sich sogar die Maschinellen Lernkurse von Andrew Ng nicht verstehen und arbeitete sich auch nicht durch das Studium der Analysis. Dennoch arbeitete er sich Zeile für Zeile durch den Code der Diffusionsmodelle, nutzte ChatGPT, um Mathematik und Maschinelles Lernen nachzuholen, und schaffte es schließlich, nach San Francisco zu gelangen und sich dem Sora-Videomodellteam anzuschließen, wo er Forschungsarbeiten verrichtet, die normalerweise nur von Doktoranden ausgeführt werden können.
Seine Methode ist "wild", aber äußerst replizierbar: Projektgetrieben + rekursives Auffüllen von Wissenslücken mit KI + das harte Zeug, Code Zeile für Zeile zu lesen.
Deshalb geht es in diesem Artikel nicht um "den Comeback des Schulabbrechers", sondern darum, zu erklären, wie gewöhnliche Menschen in der Ära der großen Modelle sich mit KI auf Doktoratsebene verbessern können.
PS: Wir befürworten keinesfalls das Abbrechen der Schule. In der Vergangenheit war es in Silicon Valley beliebt, die "Legende der Schulabbrecher" zu schildern. Aber die soziale Vernetzung, die Ressourcen und der Horizont, die eine Universität bieten kann, haben eine sehr hohe Ersatzkosten. Gabriel selbst gibt zu, dass das Fehlen eines Diploms in einigen Situationen immer noch eine Einschränkung darstellt. Er hat sich einfach entschieden, es auf die extreme Art und Weise "durchzudrängen". Wenn Sie sich jedoch gerade in der Hochschule befinden, in einer sicheren und ressourcenreichen Umgebung sind und die Lernmethode von Gabriel anwenden, wird Ihre Wachstumsgeschwindigkeit wahrscheinlich 100- oder sogar 1.000-mal höher sein als auf dem traditionellen Weg.
Der folgende Text ist eine chinesische Transkription eines Podcast-Interviews von Cel Wen, dem Gründer von Extraordinary.com. Der Gast ist Gabriel Petersson, ein ehemaliger schwedischer High School-Abbrecher und derzeitiger OpenAI-Forschungswissenschaftler.
1. Die erste Gründung: Mit Empfehlungssystemen und A/B-Test-Skripten von Firma zu Firma gehen und Lösungen anbieten
Moderator: Unser Gast heute ist Gabriel Petersson, ein ehemaliger schwedischer High School-Abbrecher und jetzt ein AI-Forschungswissenschaftler bei OpenAI, einem Mitglied der Firma hinter ChatGPT. Gabriels Geschichte ist sehr fesselnd.
Ich habe einen Tweet von Ihnen gelesen: "Vor fünf Jahren habe ich ohne nennenswerte Ingenieurserfahrung die schwedische High School abgebrochen und einer Startup-Firma beigetreten. Heute bin ich bei OpenAI als Forschungswissenschaftler und arbeite mit dem Sora-Team an der Entwicklung von AGI." Wie haben Sie das geschafft?
Gabriel: Das ist eine lange Geschichte. Ich habe mich eigentlich schon immer mit KI beschäftigt, wahrscheinlich seitdem ich "Superintelligence" und "Life 3.0" gelesen habe. Ich habe diese beiden Bücher besonders gut gefunden, und die Autoren sind übrigens beide Schweden. Ich dachte mir: Da muss es etwas dran geben.
Aber damals habe ich immer gedacht, ich sei nicht schlau genug. Ich habe ein bisschen über KI recherchiert, konnte aber nicht programmieren. Ich hatte das Gefühl, dass es draußen nur extrem intelligente Leute gebe und ich nie mit ihnen konkurrieren könnte. Schließlich habe ich mich für den Beruf des Ingenieurs entschieden und einige Jahre in einer Startup-Firma als "Ingenieur-Arbeiter" gearbeitet.
Moderator: Warum haben Sie die Schule abgebrochen? In Ihrer Heimat, in der Umgebung, in der Sie aufgewachsen sind, gehen doch alle normalerweise zur Schule. Woher haben Sie die Mut, zu gehen?
Gabriel: Ehrlich gesagt war es nicht so, dass ich "entschlossen" war. Es war eher so, dass die Dinge mich dahin getrieben haben. Eines Tages hat mich mein Cousin angerufen und mir gesagt, dass er gerade einen extrem intelligenten Menschen kennengelernt habe, der die Idee für ein Empfehlungssystem mit KI habe und dass wir das sofort zusammen entwickeln und an Kunden verkaufen sollten. Der Mann hat damals in Singapur geforscht. Mein Cousin hat mir gesagt: "Wir müssen jetzt loslegen. Komm sofort nach Stockholm."
Ich habe ihm gesagt: "Alter, ich habe heute Abend eine super Party."
Er hat gesagt: "Nein, komm jetzt."
Also habe ich mir direkt die nächste Bustickets nach Stockholm gekauft und bin dort hingegegangen und bin dann nie wieder zur Schule zurückgekehrt.
Moderator: Was ist dann in der Startup-Firma passiert?
Gabriel: Unsere Idee war es, ein Produktempfehlungssystem für E-Commerce-Unternehmen zu entwickeln. Das Problem war jedoch, dass wir alle nichts von "Gründung" wussten. Wir wussten nicht, wie man Kunden gewinnt und wie man verkauft.
Anfangs habe ich kalte E-Mails verschickt, aber fast niemand hat geantwortet. Später habe ich angefangen, anrufen zu gehen. Manchmal konnte ich auch gute Gespräche führen, aber am Ende bin ich doch nur ein 18-jähriger Junge ohne technischen Hintergrund. Es war schwer, dass man mir wirklich vertraute.
Später bin ich direkt vor Ort verkauft.
Ich habe im Voraus die Websites der Kunden gecrawlt, ein neues Empfehlungsmodel trainiert und dann die ursprünglichen Empfehlungsergebnisse und die von uns generierten Ergebnisse auf einem großen A3-Blatt ausgedruckt. Links waren die aktuellen Ergebnisse, rechts die von uns.
Ich habe ungefähr mehr als hundert Exemplare gemacht, in Ordner gesteckt und von Firma zu Firma gegangen und gefragt: "Können Sie mir bitte den E-Commerce-Verantwortlichen oder den CEO holen?"
Wenn sie das Vergleichsblatt sahen, waren sie zuerst geschockt und fragten: "Haben Sie das alles gemacht? Wie haben Sie das geschafft?" Dann kamen die Fragen: "Wie kann man das jetzt implementieren?"
Dann habe ich gesagt: "Kein Problem, wir sind heute schon fertig und können es direkt implementieren." Ich habe immer ein Skript bei mir gehabt, das ich einfach in die Browserkonsole der Website einfügen konnte, um die ursprünglichen Empfehlungsergebnisse durch die von uns zu ersetzen. Das Skript enthielt auch einen A/B-Test, um die Einnahmen beider Versionen zu vergleichen. Oft konnte ich sie schon beim ersten Treffen dazu bringen, auf unsere Lösung umzusteigen - es klingt verrückt, aber es hat wirklich funktioniert.
Natürlich haben wir dadurch auch später große Probleme bekommen: Wir haben überhaupt nicht an Skalierbarkeit und Wartbarkeit gedacht, sondern nur daran, die Kunden zu gewinnen. Unser gesamtes Team bestand aus 17- und 18-jährigen Schulabbrechern, die einfach nur mit viel Eifer vorwärts gingen.
Moderator: Haben Sie alles in Stockholm vor Ort gemacht?
Gabriel: Ja, wir waren alle dort. Ich habe in der Studentenwohnung meines Cousins gewohnt. Die Wohnung war sehr klein. Es war eigentlich eine normale Wohnung, aber nur Studenten durften dort wohnen. Beim Antrag mussten wir sogar vortäuschen, dass er noch an der Universität studiert. Ich habe ein ganzes Jahr auf einem ausgesuchten Sofa im Gemeinschaftsraum geschlafen. Das Zimmer war klein und dreckig, aber das war unser gemeinsames Arbeitszimmer.
Moderator: Die meisten Menschen würden in einer solchen Situation wahrscheinlich zurück zur Schule gehen, aber Sie haben es nicht getan. Was hat Sie motiviert, durchzuhalten?
Gabriel: Meine Wahrnehmung der Realität war immer verzerrt. Ich war damals 100% sicher, dass ich ein Millionär werden würde. Ich hatte wirklich keine Zweifel. Ich war überzeugt, dass wir an "dem nächsten großen Projekt" arbeiteten und dass alles andere unwichtig war. Also habe ich hart gearbeitet, immer wieder Nachts auf der Arbeit geblieben, in ganz Stockholm herumlaufen und verkauft und alle möglichen verrückten Methoden versucht, um Kunden zu gewinnen.
2. Die schnellste Lernmethode ist nicht, zuerst die Grundlagen zu lernen, sondern durch reale Projekte herausgefordert zu werden
Moderator: Sie konnten am Anfang nicht programmieren. Wie haben Sie es dann gelernt?
Gabriel: Hauptsächlich bin ich dadurch gezwungen worden, weil wir für die Kunden verschiedene Integrationen vornehmen mussten. Zuerst hat mein Cousin mir Java beigebracht, und wir haben zusammen ein sehr schlechtes Turn-basiertes "Pokémon"-Spiel geschrieben. Später habe ich einen Python-Kurs auf Udemy besucht und ein ähnlich schlechtes Spiel gemacht. Ich habe auch versucht, die Maschinellen Lernkurse von Andrew Ng zu besuchen, aber ich habe überhaupt nichts verstanden und mich nur dumm gefühlt.
Das eigentliche Lernen hat erst nach der Gründung begonnen, weil man einfach gezwungen war, diese Dinge zu tun: Webcrawler schreiben, Empfehlungssysteme entwickeln, A/B-Tests durchführen, verschiedene Integrationen vornehmen. Wenn man vor einem realen Problem steht, wird das Lernen viel einfacher.
Man sucht in Stack Overflow nach Lösungen, und wenn man an einer Stelle hängen bleibt, fragt man Freunde. Wenn man den realen Arbeitsdruck hat, ist man gezwungen, die Dinge zu lernen. Für mich ist es fast unmöglich, etwas zu lernen, wenn ich keinen Druck habe.
Moderator: Wenn Sie einem anderen High School-Abbrecher einen Rat geben würden, was würden Sie ihm sagen?
Gabriel: Ich bin sehr glücklich gewesen. Ich bin in einer kleinen Stadt namens Vaggeryd in Schweden aufgewachsen, und ich habe damals keinen einzigen Ingenieur gekannt. Als ich in der High School zum ersten Mal einen Programmierer gesehen habe, war ich total begeistert und habe ihn gefragt, ob er Webseiten machen könne.
In einer solchen Umgebung ohne Ingenieure und ohne Startup-Kultur kommt man ganz natürlich zu dem Gedanken, dass all das sehr weit von einem entfernt ist. In San Francisco hingegen ist das Gründen von Unternehmen eine normale Option, vor allem weil alle um einen herum darüber sprechen.
Ich bin so weit gekommen, weil ich diese Startup-Firma kennengelernt habe, die mir die Möglichkeit gegeben hat, "im echten Leben" zu arbeiten. Dies war für mich die wichtigste Lernerfahrung. Wenn andere einen ähnlichen Weg gehen möchten, würde ich ihnen empfehlen, so schnell wie möglich in den Markt einzusteigen, reale Probleme zu lösen und wirklich für die Ergebnisse verantwortlich zu sein.
Heute mit ChatGPT können Sie sogar anfangen, ohne viel technisches Wissen zu haben. Sie müssen nur beweisen, dass Sie Fragen stellen können, Anforderungen formulieren können und bereit sind, selbst tätig zu werden und eine starke Eigeninitiative haben. Sie können einfach sagen: Ich kenne die technischen Details noch nicht, aber ich werde ChatGPT fragen, und ich kann von dort alles Wissen bekommen, das ich brauche.
Wissen an sich ist heute kein Knappheitselement mehr.
Moderator: Früher mussten Sie zuerst Kurse besuchen und Bücher lesen, um den Weg vorzubereiten. Heute können Sie direkt mit einer Frage an die KI gehen.
Gabriel: Ja. Die schnellste Lernmethode für Menschen ist tatsächlich von oben nach unten: Man beginnt mit einer realen Aufgabe und arbeitet sich dann Schritt für Schritt tiefer ein. Wenn man an einer Stelle nicht versteht, lernt man diese Stelle dann sofort.
Aber die Schule kann dies nicht massenhaft lehren, weil es erfordert, dass der Lehrer immer entscheiden kann, "was Sie als Nächstes lernen sollten". Deshalb wählt das Bildungssystem in der Regel die Methode von unten nach oben: Man beginnt mit Mathematik, Lineare Algebra, Matrizen und baut Schicht für Schicht auf. Dies ist gut für die Massenbildung, aber die Lernleistung ist sehr niedrig.
Heute mit ChatGPT hat sich dies geändert. Die Universität hat nicht mehr das Monopol auf den Zugang zu "Grundwissen". Ich habe es sogar schwer, Universitäten ernst zu nehmen, deren Curricula noch keine Inhalte zu großen Modellen als Grundlagen enthalten. Solche Dinge sollten schon von einem sehr jungen Alter an kennengelernt werden.
Viele Leute sagen, dass man auf diese Weise "nie das eigentliche Problem verstehen kann", aber das stimmt nicht. Man kann ganz gut von der Aufgabe ausgehen und sich rekursiv tiefer einarbeiten und trotzdem sehr tief verstehen.
Wenn ich beispielsweise Maschinelles Lernen lernen möchte, frage ich zuerst ChatGPT: Welches Projekt sollte ich machen? Ich lasse es mir einen Projektplan erstellen und beginne von dort. Dann lasse ich es einen ganzen Abschnitt von Maschinellen Lerncode schreiben. Es wird sicherlich Fehler geben, also beginne ich damit, die Fehler zu beheben und den Code Schritt für Schritt lauffähig zu machen. Wenn das Programm läuft, konzentriere ich mich auf einen kleinen Abschnitt und frage weiter: "Was macht dieser Teil genau? Kann man es auf eine anschaulichere Weise erklären? Warum kann dieses Modul dem Modell helfen, etwas zu lernen?"
Es wird zuerst eine Erklärung geben und dann erwähnen, dass hier Matrixmultiplikation und Lineare Algebra verwendet werden. Dann frage ich weiter: "Wie funktionieren diese Dinge im Grunde? Was ist die dahinterliegende mathematische Intuition? Kann man einige Diagramme zeichnen, um mir die Intuition für dieses Maschinelles Lernmodul zu vermitteln?"
So lernt man von der "oberen Aufgabe" aus und füllt all die notwendigen Grundlagen Schritt für Schritt auf, anstatt von der untersten Ebene aus jahrelang zu kämpfen. Dieser Wandel wird die Bildung grundlegend verändern.
Moderator: Was wird in der Schule über KI überhaupt nicht gelehrt oder falsch gelehrt?
Gabriel: Zuerst stimmt die allgemeine Wahrnehmung von KI in der Schule schon nicht. Als ChatGPT herauskam, war die erste Reaktion der Schüler: "Super, jetzt gibt es etwas, das mir alle Hausaufgaben machen kann." Sie haben nur das gesehen. Ehrlich gesagt, hätte ich wahrscheinlich auch dasselbe gedacht, wenn ich damals ein Schüler gewesen wäre.
Die erste Reaktion der Lehrer war: "Oh nein, alle werden mit KI ihre Hausaufgaben abschreiben. Wir müssen es sofort verbieten. KI ist etwas Schlechtes." So hat sich ein sich verstärkender Kreislauf entwickelt: In den Augen der Schüler ist KI ein Betrugsinstrument; in den Augen der Lehrer ist KI die Quelle des Betrugs. In einer solchen Umgebung hat fast niemand die Möglichkeit, auf natürliche Weise die Intuition zu entwickeln, dass KI "zum Lernen" verwendet werden kann. Diese Gewohnheit wächst nicht von alleine