GPT-6 öffnet selbst die Software und erledigt die Arbeit, aus einer Zeichnung entstehen 3295 Teile, und mit nur einem Satz lässt sich eine Luxusvilla bauen.

Kaum wurde GPT-6 Astra veröffentlicht, schaut schon niemand mehr auf die Ranglisten?

Das liegt nicht daran, dass die Benchmark-Werte schlecht ausfallen, sondern dass OpenAI seine Vorgehensweise geändert hat: Es nimmt jetzt die „Hausaufgaben“ der Entwickler entgegen. Die Entwickler denken sich: Na gut, dann reichen wir eben unsere Hausaufgaben ein.

Der Entwickler Tom Krcha hat eine alte Zeichnung einer Dampflokomotive an Astra übergeben und es gebeten, diese in Blender nachzubauen.

Einige Minuten später gibt es in Blender 3295 bearbeitbare eigenständige Objekte: Kessel, Kuppelstangen, Räder, Nieten – jedes einzelne lässt sich auswählen und separat bearbeiten.

Egal wie detailliert oder vereinfacht das Modell sein soll, eine einzige Anweisung reicht. Mit den Worten von Krcha: „Baue dir deinen eigenen Transport-Tycoon.“

Viele Menschen staunen, dass KI plötzlich 3D-Modellierung gelernt hat, aber Krcha selbst bremst die Euphorie sofort:

Glauben Sie nicht, dass es sich um einen Modellierer handelt, der in Blender mit der Maus klickt. Es klickt überhaupt nicht mit der Maus, sondern erstellt alle Teile durch Schreiben von Python-Skripten.

Das ist die zugrundeliegende Logik dieser aktuellen 3D-Welle.

Astra hat keine Hände entwickelt, die Software bedienen können. Es behandelt Blender lediglich als eine Ausführungsumgebung mit API.

Zuerst betrachtet es die Zeichnung, versteht, wie die Lokomotive zusammengebaut ist, zerlegt Kessel, Räder und Kuppelstangen in einzelne Teile, ruft dann die Python-Schnittstelle bpy von Blender auf, generiert Geometrien für jedes Teil einzeln, benennt sie und platziert sie an der richtigen Stelle.

Die Fähigkeit, Zeichnungen zu verstehen, räumliche Beziehungen abzuleiten, Skripte zu schreiben und die Ergebnisse anhand von Renderbildern zu korrigieren – wenn diese vier Fähigkeiten zusammenkommen, erscheint es Außenstehenden so, als könne es „modellieren“.

Eine weitere Demonstration von Krcha geht noch weiter: Bei der Umstellung auf Three.js entfallen sogar die Modell-Dateien.

Die Geometrien von zwei Zügen, die Drehung der Räder sowie die Animationen zum Zerlegen und Zusammenbauen werden alle zur Laufzeit im Browser mit TypeScript-Code berechnet.

Von einer einzigen Anweisung zu einem Haus, das Türen öffnen und Kaffee ausschenken kann

Um zu beweisen, dass dies kein zufälliges Kunststück ist, hat der eigene OpenAI-Ingenieur Thomas Ricouard die anspruchsvollste aller „Hausaufgaben“ eingereicht.

Sein Ausgangspunkt ist nur eine einzelne Anweisung: Entwerfe ein minimalistisches, aber detailreiches Haus mit Garten und kinematografischer Beleuchtung. Keine Grundrisse, keine Möbellisten.

Astra erstellt über die Python-Schnittstelle von Blender direkt das gesamte Gebäude, alle Holzarbeiten, Möbel, Pflanzen, Materialien, Beleuchtung und Kameras.

Entscheidend ist: Bevor es das Ergebnis zurückgibt, betrachtet es selbst die Vorschau-Renderings, passt die Komposition an, korrigiert die Beleuchtung, beseitigt Überlappungen von Pflanzen und richtet die Decke auf dem Sofa neu aus.

Die erste Version des mit einer Anweisung generierten Solace-Wohnhauses: Astra erstellt Gebäude, Möbel, Materialien und Beleuchtung über die Blender-Python-Schnittstelle.

Einmal entdeckte Astra selbst, dass die Normalenrichtung eines Teils des Edelstahl-Spülbeckens falsch war, sodass das Rendering aussah, als wäre es eingedrückt. Es korrigierte dies spontan und rendert das Bild neu.

Keines dieser Probleme wurde von Ricouard benannt, alle wurden vom Modell selbst erkannt und behoben.

Als Ricouard verlangte, das Haus zu vergrößern, zeigte Astra seine Professionalität.

Zuerst zeichnete es einen Grundriss: Ein U-förmiges einstöckiges Wohnhaus mit Wohnzimmer, Esszimmer und Küche in der Mitte, drei Schlafzimmern und einem Arbeitszimmer in den beiden Flügeln, umgeben von einem bepflanzten Innenhof.

Der Grundriss weist durchdachte Wegeführungen auf: Beispielsweise gibt es keine separaten Flure vor den Schlafzimmern, und die Route um den Innenhof vermeidet den Arbeitsbereich der Küche.

Nachdem Ricouard den Grundriss genehmigt hat, baut Astra das gesamte Haus neu auf.

Astra zeichnet zuerst den Grundriss und modelliert danach: U-förmiges einstöckiges Wohnhaus mit Wohn-, Ess- und Küchenbereich in der Mitte, drei Schlafzimmern und Arbeitszimmer in den Flügeln, Wegeführung vermeidet den Küchenarbeitsbereich.

Alle erstellten Objekte sind reine Geometrien: Sofakissen haben Keder, Betten haben Bettrahmen, Lattenroste und Matratzen, Kleiderschränke haben interne Trennwände und Kleiderstangen, Schreibtische haben Kabelkanäle, und das Spülbecken ist tatsächlich ein hohles Becken.

Um das Ergebnis zu prüfen, bat Ricouard um eine 30-sekündige, menschengemäße HD-Kamerafahrt durch das Haus.

Astra schreibt selbst das Skript, um die Kamera in 1,65 Meter Höhe aufzustellen, ein Objektiv mit 24–26 mm Brennweite zu verwenden und leichte Gehbewegungen hinzuzufügen. Wenn es in der Vorschau Aufnahmen vor einer leeren Wand erkennt, nimmt es diese neu auf, und rendert schließlich 900 Frames, um den fertigen Film zusammenzusetzen.

Das ist noch nicht alles: Astra schreibt anschließend eine komplette Export-Pipeline: Es exportiert die Geometrien als FBX und generiert gleichzeitig eine JSON-Beschreibungsdatei, die Position, Material und Beleuchtung jedes Teils aufzeichnet.

Es überträgt das gesamte Haus in die Unreal Engine 5, rechnet die Einheiten von Metern in Zentimeter um, dreht das Koordinatensystem um und baut das Materialsystem unter Wiederverwendung der Texturen neu auf – alles wird automatisch in der Pipeline verarbeitet. Schließlich fügt es eine First-Person-Figur und Kollisionen hinzu, verpackt das Ganze in eine native Mac-Anwendung und durchläuft selbst eine Testroute.

In der neuesten Version können Sie mit der Taste E nicht nur Türen öffnen, Schubladen ziehen und Lichter ein- und ausschalten, sondern sogar die Kaffeemaschine bedienen, sodass tatsächlich Kaffee in die Tasse fließt und der Flüssigkeitsstand ansteigt.

Von einer einzigen Anweisung zu einem Haus, das Türen öffnen und Kaffee ausschenken kann, gab es keinen Wechsel des Bedieners in der Werkzeugkette.

Früher gab es einen Mitarbeiter für die Blender-Modellierung, einen zweiten für den Export in die Engine und einen dritten für die Programmierung der Interaktionslogik – jetzt übernimmt ein einziges Modell den gesamten Prozess von Anfang bis Ende.

Das ist die wirklich bahnbrechende Veränderung.

Die Ausführungsebene der softwareübergreifenden Werkzeugkette wird durchgängig vernetzt

Wenn es nur um 3D ginge, könnte man noch sagen, dass dies ein Nebeneffekt der verbesserten visuellen Fähigkeiten ist.

Aber eine weitere Demonstration auf der offiziellen Veröffentlichungsseite führt direkt in die Elektrotechnik.

Astra erhält ein Schaltplan-Skizze, öffnet KiCad, platziert alle Bauteile einzeln auf der Platine, verlegt alle Kupferleitungen und erstellt schließlich ein PCB-Layout, das direkt zur Fertigung an die Fabrik geschickt werden kann.

Jeder, der mit Hardware arbeitet, weiß, wie lästig diese Aufgabe ist: Die PCB-Layout-Gestaltung erfolgt bis heute größtenteils manuell und ist ein bekannter Engpass im Elektronik-Design-Prozess.

Schreiben von bpy-Skripten in Blender, Erstellen von Export-Pipelines in Unreal, direktes Generieren von Geometrien in Three.js, Platzieren von Bauteilen und Verlegen von Leitungen in KiCad.

Vier scheinbar völlig unabhängige professionelle Softwarelösungen basieren auf demselben Vorgehen: Die Aufgabe verstehen, die Schnittstelle der Software finden, Code schreiben oder die Operation durchführen, das Ergebnis prüfen und es gegebenenfalls korrigieren.

OpenAI definiert diese Fähigkeit als Computerbedienung, Webbrowsing und professionelle Arbeit. Nur eine Woche nach der Veröffentlichung nutzt Astra diese Fähigkeit bereits, um die ersten professionellen Softwarelösungen zu seinem Testfeld zu machen.

In der Community tauchen inzwischen eine Vielzahl von kreativen Ergebnissen in sprunghafter Weise auf.

Peter Gostev hat Astra gebeten, mit Three.js die sechs berühmtesten Gemälde von Van Gogh zu einer begehbaren zusammenhängenden Kleinstadt zu verbinden.

Sie wachen in „Das Schlafzimmer in Arles“ auf, öffnen die Tür und stehen vor dem „Café-Terrasse am Abend“. Wenn Sie die Straße entlanggehen, gelangen Sie zur „Sternennacht über der Rhone“, und vor den Toren der Stadt erwarten Sie „Die Krähen über dem Weizenfeld“ und ein Sonnenblumenfeld.

Der gesamte Prozess ist prozedural generiert, es wurde kein einziges externes Material verwendet. Jede Wand und jede Steinplatte wurde durch Code gezeichnet.

Das zeigt, dass Astra nicht nur in der Lage ist, Assets zu erstellen. Es übernimmt den gesamten Prozess: Wie man sechs Gemälde zu einem zusammenhängenden Raum kombiniert, welche Aktion bei welcher Position ausgelöst wird und wie man das Ergebnis schließlich zu einer im Browser öffnenden Webseite verpackt.

Matt Shumer ließ Astra eine Woche lang in Unreal arbeiten, um ein komplettes Manhattan nachzubauen.

Dominik Kundel ließ Astra in BrickLink Studio ein tatsächlich zusammenbaubares Lego-Modell entwerfen und rendert es anschließend mit Blender zu einem 4K-Video. Dieser Anwendungsfall wurde offiziell von OpenAI Developers weiterverbreitet.

Ein Entwickler hat eine interaktive Website zur menschlichen Anatomie mit 2234 Teilen erstellt, die sich zerlegen und drehen lässt.

Ein anderer hat eine AR-Reinigungsanwendung entwickelt: Die Handykamera folgt dem Bürstenkopf des Staubsaugers, der gereinigte Bodenbereich wird in Echtzeit grün markiert, sodass man sofort erkennen kann, welche Stellen noch nicht gereinigt wurden. Unten links wird die bereits gereinigte Fläche laufend summiert angezeigt.

Die Van-Gogh-Stadt ist eines der wenigen Beispiele, bei denen alles von Grund auf neu erstellt wurde.

Wichtig ist zu beachten: Die meisten der viralen Ergebnisse wurden nicht vollständig aus dem Nichts generiert, auch wenn sie fertige Ergebnisse liefern.

Das virale Anatomie-Projekt mit 2234 Teilen nutzt die vorhandene BodyParts3D-Datenbank. Astra hat diese lediglich zu einer zerlegbaren und drehbaren interaktiven Website zusammengesetzt, nicht mehr als zweitausend menschliche Strukturen von Grund auf neu modelliert.

In Ricouards Waldvilla werden auch vorgefertigte Scan-Assets von Poly Haven für Bäume, Farne, Steine sowie Texturen für Eichenholz und Gips verwendet.

Astras Stärke liegt nicht in der Fähigkeit, Dinge aus dem Nichts zu erschaffen, sondern in der Fähigkeit, Werkzeugketten selbstständig zusammen