Die interessanteste Verbesserung der Kamera des iPhone 18 Pro sind zwei „widersprüchliche“ KI-Funktionen

Um 8 Uhr heute Morgen ist die Apple iPhone 18 Pro-Serie offiziell in den Verkauf gegangen, und vor den Geschäften in vielen Regionen haben sich lange Schlangen gebildet. Da das auffälligste iPhone Duo erst im Oktober auf den Markt kommt, ist die Nachfrage nach den heute vorgestellten beiden Modellen iPhone 18 Pro und iPhone 18 Pro Max eher verhalten – insbesondere beim ersteren ist der Preis auf E-Commerce-Plattformen während der Vorbestellungsphase bereits unter den Listenpreis gefallen.

Vor nur drei Tagen wurde iOS 27 endlich offiziell ausgeliefert – und schon tauchte das erste Problem auf. Ein Reddit-Nutzer hat ein Foto eines Pferdes an die neue Apple-Funktion Spatial Reframing übergeben, um das Bild einfach zu ergänzen – und plötzlich erschien darauf ein fremder Mensch.

Es handelte sich weder um ihn selbst noch um Verwandte oder Freunde, die er jemals in seinem Fotoalbum aufgenommen hatte – es war ein völlig fremder „Mensch“, ein nicht existierender, aus der Halluzination der KI stammender „Mensch“.

Links: Das Originalbild, rechts: Das von Spatial Reframing bearbeitete Bild. Quelle: Reddit-Nutzer @friendofmany

Man sieht, dass im Originalbild hinter dem Pferd ein kleines Stück zu sehen ist, das wie ein Hut aussieht. Wenn Spatial Reframing das Bild nach oben verschiebt und erweitert, ergänzt es einen Mann, der nie zuvor auf dem Bild zu sehen war.

Das klingt gefährlich – wie kann das iPhone so etwas tun? Keine Sorge: Wenn Sie die iPhone 18 Pro-Serie kaufen möchten, ist sie mit der neuesten, der KI entgegenwirkenden Funktion Apple Reference Image ausgestattet.

Aber warten Sie einen Moment – bedeutet das etwa, dass Apple zu dem Zeitpunkt, an dem iOS mit zahlreichen generativen KI-Funktionen auf den Markt kommt, auch eine Funktion eingeführt hat, die genau das Gegenteil von generativer KI bewirkt?

Ja, das ist eine Gruppe neuer, scheinbar widersprüchlicher Funktionen, die wir auf der iPhone 18 Pro-Serie entdeckt haben.

Aus einem Hut wächst ein Mensch heraus

Spatial Reframing ist eine neue generative Bildbearbeitungsfunktion in iOS 27, die bereits seit Juni in der Beta-Version zur Verfügung steht. Nutzer können nicht nur Fotos zuschneiden, sondern auch das Bild verschieben, um den Blickwinkel zu simulieren, den der Fotograf hätte, wenn er sich seitwärts bewegen würde.

Da sich die Kamera aber tatsächlich nicht bewegt hat, muss Spatial Reframing, um der Kamera nach der Aufnahme eine neue Position zu geben, zwangsläufig Bereiche zeichnen, die das ursprüngliche Objektiv nicht erfasst hat. Wo keine Pixel vorhanden sind, werden Pixel generiert – und wenn unter dem Hut ein Mensch fehlt, ergänzt es einfach ein Gesicht und einen Körper.

Das Prinzip dieser Bildtechnik basiert ebenfalls auf generativer KI, sodass das „Erschaffen aus dem Nichts“ unvermeidlich ist. Tester von TechRadar haben ebenfalls festgestellt, dass die KI bei der Bearbeitung von Gebäuden und belebten Straßen gelegentlich Fenster und Vorsprünge an Gebäuden hinzufügt, die in der Realität nicht existieren. Im Gegensatz zu normaler Bildvergrößerung ergänzt Spatial Reframing nicht nur mehr Hintergrund um das Foto herum. Es simuliert die Bewegung der Kameraposition, verarbeitet die relativen Verhältnisse zwischen Vorder- und Hintergrund neu und ergänzt anschließend die Bereiche, die nach der Änderung des Blickwinkels ursprünglich verdeckt waren oder überhaupt nicht in das Objektiv gelangt sind.

Apple kann Perspektive, Licht- und Schattenverhältnisse sowie die Kontinuität von Objekten stetig verbessern, sodass die generierten Ergebnisse immer natürlicher wirken – aber es kann den grundlegenden Widerspruch dieser Funktion nicht beseitigen: Solange die Kamera diese Pixel nicht aufgezeichnet hat, kann das Modell nur anhand des vorhandenen Bildes erraten, was dort sein sollte.

Um ehrlich zu sein: Die Smartphone-Fotografie bedeutet schon lange nicht mehr, dass Licht durch das Objektiv fällt und unverändert im Fotoalbum landet. In dem Moment, in dem Sie den Auslöser drücken, wirken eine ganze Reihe von Prozessen zusammen: HDR kombiniert mehrere Belichtungen, der Nachtmodus hebt Details in dunklen Bereichen hervor, und der Porträtmodus berechnet die Entfernung zwischen Motiv und Hintergrund. Die Fotos, die wir sehen, waren schon immer das gemeinsame Ergebnis von Sensor und Algorithmus.

Früher dienten diese Berechnungen vor allem dazu, das, was die Kamera bereits erfasst hatte, deutlicher zu machen. Spatial Reframing überschreitet jetzt eine weitere Grenze: Es muss Inhalte für Bereiche ergänzen, die die Kamera nie gesehen hat.

Infolgedessen sieht das Foto immer noch wie ein normales Foto aus, entspricht aber nicht mehr automatisch einer Aufzeichnung der realen Szene. Der fremde Mensch hat keinen Prozess, in dem er ins Bild gelangt, und es gibt keinen Moment, in dem der Auslöser für ihn gedrückt wurde – er wurde direkt aus dem kleinen Stück des Hutes zu einem lebendigen „Menschen“ umgewandelt.

Apple legt eine zweite Zeugenaufzeichnung für Fotos an

Offensichtlich war Apple darauf aber nicht unvorbereitet: Die brandneue iPhone 18 Pro-Serie wird mit Apple Reference Image ausgestattet sein.

Dies ist ein optionaler Reference-Aufnahmemodus. Wenn er aktiviert ist, hinterlässt die Kamera bei der Aufnahme ein von dem Sensor direkt signiertes DNG-„digitales Negativ“, das die ursprünglichen Pixel, Sensorinformationen und Aufnahmezeit aufzeichnet und mit dem Hauptfoto verbindet, das durch die übliche rechnergestützte Fotoverarbeitung bearbeitet wurde.

Bildquelle: Instagram-Nutzer @iJustine

Dieses Nachweissystem wird bereits ab der Fabrikauslieferung des Telefons aufgebaut: Der Hauptkamerasensor erzeugt eine eigene eindeutige kryptografische Identität, die an das Secure Enclave des Telefons gebunden ist. Wenn der Nutzer den Auslöser drückt, wechselt der Sensor in einen speziellen Sicherheitsmodus und signiert die Pixeldaten direkt, bevor die Firmware das Bild verändert. Anschließend prüft Private Cloud Compute, ob Sensor, Telefon und Zeitstempel zueinander passen.

Das System speichert gleichzeitig ein normales, bearbeitbares Foto und ein sicheres digitales Negativ, das vom Sensor signiert wurde. Letzteres wird nicht sofort zu einem sichtbaren Reference Image. Nur wenn der Nutzer eine Überprüfung durchführen muss, wird es über Private Cloud Compute zu einem unveränderlichen Referenzbild verarbeitet.

Bei der Vorstellung wurde es zunächst als eine Art „Wasserzeichen“ zur Erkennung von KI-generierten Inhalten verstanden, aber tatsächlich bietet es eine unabhängige Referenz, mit der man vergleichen kann, was zwischen dem endgültigen Foto und der Aufzeichnung des Sensors passiert ist.

Nehmen wir das Beispiel des Fotos vom Pferderücken, das der Reddit-Nutzer am Anfang aufgenommen hat (offensichtlich nutzt er keine iPhone 18 Pro-Serie): Wenn er den normalen Aufnahmemodus verwendet und anschließend den Blickwinkel mit Spatial Reframing ändert, erscheint im Fotoalbum nur ein vollständiges, generativ bearbeitetes Foto. Es kann die eigene Bearbeitungshistorie des Apple-Fotoalbums behalten, sodass man auf „Wiederherstellen“ klicken kann – aber es gibt keine Sensorsignatur und kein Reference Image zur externen Überprüfung.

Auf der iPhone 18 Pro-Serie erzeugt der Reference-Modus nicht sofort drei zusätzliche Fotos im Album. Wenn Sie den Auslöser drücken, laufen zwei Verarbeitungswege gleichzeitig ab: Der übliche rechnergestützte Fotografieprozess erzeugt ein Hauptfoto, das weiter bearbeitet werden kann. Der Sensor signiert die erfassten Pixel, bevor die Firmware das Bild verändert, und speichert es als sicheres digitales Negativ, das mit dem Hauptfoto verbunden ist.

Dieses DNG-Negativ ist noch kein Reference Image. Nur wenn der Nutzer eine Überprüfung durchführen muss, wird es an Private Cloud Compute übermittelt, wo in einer prüfbaren Umgebung Demosaicing, Tonemapping und Komprimierung durchgeführt werden – bis es schließlich zu einem sichtbaren Referenzbild mit Apple-Signatur wird.

Wenn der Nutzer anschließend Spatial Reframing auf das Hauptfoto anwendet, zeigt das Fotoalbum zuerst die bearbeitete Version an. Das Hauptfoto vor der Bearbeitung bleibt in der nicht-destruktiven Bearbeitungsaufzeichnung erhalten, während das Reference Image auf einem separaten Weg gespeichert wird und nur über die Reference-Markierung aufgerufen werden kann.

Auf diese Weise entstehen drei Ebenen in demselben Fotoprojekt:

Das bearbeitete Endbild, auf dem hinter dem Pferderücken ein fremder Mensch steht;

Das Foto nach Rückgängigmachung der Bearbeitung, auf dem kein Mensch zu sehen ist;

Das aus der Sensoraufzeichnung generierte Reference Image (muss aufgerufen werden), auf dem kein Mensch zu sehen ist.

Die ersten beiden zeichnen auf, wie Apple das Foto verarbeitet hat – nur die letzte Zeugenaufzeichnung kann beweisen, dass der Sensor in dem Moment, in dem der Auslöser gedrückt wurde, diesen Menschen nie gesehen hat.

Überflüssig? Ganz im Gegenteil

Heutzutage ist das Konzept des „Originalfotos“ ein veraltetes Konzept, das nicht mehr der Realität entspricht.

Wenn der Reference-Modus bei der Aufnahme nicht aktiviert wurde, lassen sich alle Änderungen und Bearbeitungen auch bei einem vorhandenen „Originalfoto“ im Apple-Fotoalbum rückgängig machen oder wiederherstellen – aber es gibt nie eine ursprüngliche Aufzeichnung, die von der Hardware signiert wurde und von anderen überprüft werden kann.

Vor dem Endbild, das mit Spatial Reframing (oder jedem anderen Generierungstool) bearbeitet wurde, ist das „Originalfoto“ nur noch ein Material – und dieses Material kann ebenfalls vollständig von KI generiert werden.