Dies könnte die nützlichste Anwendung von Apples KI bisher sein.
Heute ist der dritte Donnerstag im Mai und auch der jährliche "WeltTag der Barrierefreiheit". Wie in den vergangenen Jahren hat Apple frühzeitig angekündigt, dass es eine neue Reihe von Barrierefreiheitsfunktionen vorstellen wird, die zusammen mit iOS 27 erscheinen werden.
Im Vergleich zu den vergangenen Jahren fällt bei dieser Reihe von Funktionen dieses Jahr am deutlichsten auf, dass die Präsenz von KI plötzlich stärker geworden ist, und einige neue Eigenschaften haben vielleicht auch direkt die systemweiten KI - Fähigkeiten von iOS 27 "spoiled".
Das iPhone kann dir nicht nur helfen zu sehen, sondern auch zu denken
Die Screenreader - Funktion und das Vergrößerungsglas gehören zu den klassischen Sehhilfsfunktionen des iPhones. Die Screenreader - Funktion kann Benutzern den Inhalt auf dem Bildschirm vorlesen, und das Vergrößerungsglas kann die Kamera nutzen, um die umgebenden Dinge zu vergrößern und intelligenter zu beschreiben.
Diese Szenarien fallen genau mit Apples "Bildschirmerkennung" und "Visuelle Intelligenz" zusammen.
Der Bildbrowser in der neuen Screenreader - Funktion kann detailliertere Beschreibungen geben, beispielsweise von Fotos, Rechnungen, persönlichen Aufzeichnungen und anderen visuellen Inhalten. Benutzer können auch weitere Fragen zu den Inhalten auf dem Bild stellen, z. B. nach dem Betrag und dem Fälligkeitsdatum einer Rechnung, und die KI wird nach Überlegung antworten.
Die Vergrößerungsglas - Funktion unterstützt ebenfalls intelligentere Beschreibungen und Fragemöglichkeiten. Benutzer können auch direkt die App per Sprachbefehl steuern, z. B. dem Telefon sagen "Vergrößern" oder "Fackel einschalten".
Was die mit der KI verbundenen Halluzinationsprobleme angeht, wird Apple in diesen Funktionen die Benutzer warnen, dass sie in jeder risikoreichen oder potenziell gefährlichen Situation nicht auf diese Beschreibungen vertrauen sollten.
Darüber hinaus wurde der Barrierefreiheitsleser auch mit KI - Fähigkeiten ausgestattet. Diese Funktion richtet sich an Menschen mit Lesebehinderungen und Sehschwächen und kann komplexe Dateiformate in leichter lesbaren Text umwandeln.
Jetzt kann es komplexe Texte wie wissenschaftliche Artikel intelligenter verarbeiten, Bilder, Tabellen und mehrspaltige Texte besser handhaben und hat auch eine neue Übersetzungsfunktion eingebaut.
Sprachsteuerung für das iPhone ist endlich da
Wird das iPhone endlich zum "Doubao - Telefon"? Eine neue Sprachsteuerungsfunktion deutet darauf hin, dass Apple endlich die vor zwei Jahren veröffentlichte KI - Funktion Siri in iOS 27 implementieren wird.
Diese Sprachsteuerungsfunktion ermöglicht es Benutzern mit Behinderungen, das iPhone und das iPad vollständig per Sprache zu bedienen. Es geht nicht nur darum, Apps zu öffnen, sondern auch um flexiblere und detailliertere Aktionen, wie z. B. das Klicken auf Buttons und Steuerelemente, und man muss nicht einmal den genauen Namen der Dateien oder Buttons aussprechen.
Beispielsweise kann ein Benutzer in der Dateiapp direkt sagen "Öffne den orangenen Ordner", und das iPhone wird automatisch den orangenen Ordner aus einer Reihe von farbigen Ordnern erkennen und öffnen. In der Kartenapp kann man sagen "Öffne die Besten - Restaurants - Anleitung", und das iPhone wird die entsprechende Funktion selbst öffnen.
Der Bloomberg - Reporter Mark Gurman hat berichtet, dass diese Hilfsfunktion im Wesentlichen ein Teil der neuen Siri - Fähigkeiten von iOS 27 ist.
Für Apple ist es unwahrscheinlich, dass es wie vor zwei Jahren eine Funktion vorzeitig ankündigt, bevor sie bereit ist. Da diese Funktion jetzt in den Barrierefreiheitsfunktionen eingeführt wurde, besteht eine hohe Wahrscheinlichkeit, dass die KI - Siri, die das Telefon per Sprachbefehl bedienen kann, tatsächlich bereit ist.
AI - Untertitel für Videos
Für Menschen mit Hörbehinderungen ist die Untertitel - Funktion von Videos von entscheidender Bedeutung. Mit Hilfe der KI - Diktierfähigkeit können Apple - Geräte Echtzeituntertitel für jedes Video generieren.
Apple hat angegeben, dass diese Fähigkeit vollständig auf der Geräte - internen Spracherkennungsfunktion basiert. Die Audio - Datenverarbeitung erfolgt vollständig lokal und wird nicht in die Cloud hochgeladen. Sie wird von iPhone, iPad, Mac, Apple TV und Apple Vision Pro unterstützt, und Benutzer können auch die Anzeigeart der Untertitel anpassen.
Derzeit unterstützt die Untertitelgenerierung nur die englische Sprache und ist nur in den USA und Kanada verfügbar. Es wird erwartet, dass sie in Zukunft auf mehr Sprachen und Regionen erweitert wird.
Nicht nur "Textuntertitel". Apple hat auch angegeben, dass FaceTime eine neue API unterstützen wird. Entwickler können Gebärdensprachen - Übersetzungsapps in FaceTime integrieren, um Benutzern bei Videotelefonaten eine künstliche Gebärdensprachenübersetzung hinzuzufügen.
Die "Namenserkennungsfunktion" macht das iPhone zu den Ohren des Benutzers. Wenn jemand den Namen eines Menschen mit Hörbehinderung ruft, gibt das Gerät eine Benachrichtigung.
Noch mehr Funktionen
Außer den oben genannten Funktionen hat Apple noch weitere Updates herausgebracht, die auch ohne Künstliche Intelligenz genutzt werden können.
Das Bedienen des Bildschirms per Augenbewegung ist bereits ein gängiges Verfahren im Bereich der Barrierefreiheit. Apple möchte es jedoch noch einen Schritt weiter gehen und mit dem "virtuellen - realen - Kombinations" - Headset Vision Pro die "Augenbewegungsbedienung" in der realen Welt ermöglichen.
Einige behinderte Menschen, die einen elektrischen Rollstuhl benutzen, haben Schwierigkeiten, den Joystick zu bedienen. Apple Vision Pro kann sein Augenbewegungstrackingsystem nutzen, um eine neue Fahrweise anzubieten: Es erscheint ein Richtungsinstrumentenbrett vor den Augen, und man kann den Rollstuhl einfach mit den Augen bewegen.
Die auf dem iPhone sehr beliebte "Fahrbewegungswarnung", also die "Kinetoseverhinderungsfunktion", kommt auch auf das Vision Pro und kann die Kinetose beim Tragen des Headsets im Auto reduzieren.
Das Vision Pro wird auch Gesichtsgesten unterstützen, um Tippvorgänge und Systemaktionen auszuführen, und es gibt eine neue Möglichkeit, Elemente per Augenbewegung auszuwählen, wenn die "Verweilsteuerung" verwendet wird.
tvOS hat auch die Unterstützung für "große Schriftarten" hinzugefügt, um Menschen mit Sehbehinderungen die Schriftgröße auf dem Bildschirm zu vergrößern und so das Lesen zu erleichtern.
iOS 27 wird auch weitere Unterstützung für mehr Barrierefreiheit - Peripheriegeräte bieten:
Für das iPhone entwickelte Hörgeräte können sich zuverlässiger zwischen Apple - Geräten verbinden und umschalten und bieten in iOS, iPadOS, macOS und visionOS eine verbesserte Einstellungserfahrung.
Die Betriebssysteme iOS, iPadOS und macOS können mit dem Sony Access - Controller verbunden werden. Benutzer können den Joystick, neun integrierte Buttons sowie bis zu vier zusätzliche externe Buttons oder spezielle Schalter definieren und zwei Controller kombinieren.
Außer den Software - Updates hat Apple auch angekündigt, dass der adaptive MagSafe - Griffhalter Hikawa im globalen Apple Store Online - Shop erhältlich ist. Er gibt es in drei Farben und kostet in China 448 Yuan.
Bailey Hikawa ist eine Designerin aus Los Angeles, USA. Sie hat zusammen mit vielen behinderten Menschen, die Schwierigkeiten haben oder eine schlechte Griffkraft haben, diesen adaptiven Griff entwickelt.
Der Griff ist aus Silikon hergestellt und kann direkt über MagSafe am iPhone befestigt werden. Er passt sich verschiedenen speziellen Handformen an, reduziert die Kraft, die zum Halten des Telefons benötigt wird, und kann auch als Halterung verwendet werden.
Hikawa und die zusammenarbeitenden behinderten Menschen sind der Meinung, dass diese drei Farben etwas Besonderes ausdrücken und eine Art "Stolz" vermitteln.
KI - Barrierefreiheit
Vor zwei Jahren, als die generative KI gerade aufkam, gab es neben den wie Pilze aus dem Boden schießenden Chatbots auch schnell Versuche, KI in den Bereich der Barrierefreiheit zu integrieren: Es gab intelligente Brillen für Menschen mit Hörbehinderungen, die die Worte anderer in Echtzeit in Untertitel umwandeln können, und auch eine KI - Leitstock für Menschen mit Sehbehinderungen, der Sprachbefehle verstehen und Navigationen durchführen kann.
Und das Smartphone ist genau der natürliche Träger für all das.
Einerseits hat es bereits viele Barrierefreiheitsfunktionen und trägt dazu bei, die Nutzungsschwelle der digitalen Welt zu senken. Andererseits durchdringt es fast alle Aspekte des täglichen Lebens und ist das Gerät, das am nächsten am Alltag liegt und am leichtesten von KI transformiert werden kann.
In den letzten Jahren haben wir ständig gesehen, wie Mobiltelefonhersteller in die KI - Barrierefreiheit investieren: Honor, Huawei und vivo haben alle Funktionen wie "KI - Weltbetrachtung" herausgebracht. Huawei hat sogar die "Xiaoyi - Sprachkorrektur" eingeführt, um mit Hilfe von KI Menschen mit Sprachbehinderungen zu helfen, eine natürlichere Ausdrucksfähigkeit wiederherzustellen.
Apple, das seit langem als Branchenführer im Bereich der Barrierefreiheit angesehen wird, wird natürlich auch diesen Trend nicht verpassen. Die angeblich viele KI - Fähigkeiten integrierende iOS 27 hat auch ihre Barrierefreiheitsfunktionen mit einer KI - Note versehen.
Obwohl Apples KI - Leistung in den letzten zwei Jahren nicht immer stabil war, kann die von Apple, das seit langem in der Barrierefreiheitsinteraktion tätig ist, getriebene Kombination von KI und Barrierefreiheit möglicherweise neue Vorbilder für die gesamte Branche setzen.
Natürlich, wenn diese Funktionen nicht vollständig zuverlässig sind, können sie auch behinderten Menschen Probleme bereiten, was natürlich dem Grundgedanken der "Barrierefreiheit" widersprechen würde. Wie die tatsächlichen Ergebnisse ausfallen werden, wird erst nächsten Monat klar werden.
Zur gleichen Zeit kann die verzögerte Einführung der KI - Funktionen in China auch dazu führen, dass diese neuen Barrierefreiheitsexperienzen vorerst nicht wirklich für mehr Benutzer zugänglich sind - bisher hat die chinesische Apple - Website noch keine Pressemitteilung über diese Funktionen veröffentlicht.
Wie auch immer, dass technischer Fortschritt schließlich den Menschen, die wirklich bedürftig sind, dient und mehr Menschen durch Technologie ein würdigeres und freieres Leben führen können, ist sowieso etwas, auf das man sich freuen kann.