Apple hat kürzlich eine Vorschau auf neue Eingabehilfen gegeben, die „später in diesem Jahr“ mit iOS 18 und anderen Updates verfügbar sein werden. Einige dieser KI-gestützten Hilfstechnologien sind so praktisch, dass sie allen Benutzern zugute kommen, wie etwa die Navigation in iOS mit den Augen, die Steuerung von CarPlay mit der Stimme und die Verwendung eines iPhones in einem fahrenden Fahrzeug, ohne dass ihnen die Reise schlecht wird.

Augensteuerung zum Navigieren auf einem iPhone oder iPad durch Blicken

Eye Tracking ist eine der besten visionOS-Funktionen, die 2024 in iOS und iPadOS Einzug halten wird. Der Grund, warum Eye Tracking auf Apple Vision Pro funktioniert Dies ist der dedizierten Hardware des Headsets zu verdanken. Der Vision Pro nutzt interne Sensoren und Kameras, um Augenbewegungen schnell zu verfolgen und die Richtung Ihres Blicks mit bemerkenswerter Präzision zu bestimmen.

Mit Eye Control können Sie freihändig durch das Betriebssystem navigieren und Apps steuern, indem Sie nur Ihre Augen verwenden, ohne Berührungseingabe, zusätzliches Zubehör oder spezielle Hardware außer der TrueDepth-Kamera, die für Face ID verwendet wird.

Die Einrichtung, Kalibrierung und Verwendung von Eye Control in allen Apps sollte einige Sekunden dauern. In Apples Video wird gezeigt, wie die Funktion zum Wechseln zwischen der Seitenleiste, Schaltflächen und Abschnitten seiner Podcasts-App verwendet wird. Sie betrachten ein Element auf dem Bildschirm und das System hebt es hervor.

Um es auszuwählen, halten Sie Ihren Blick einige Sekunden lang gedrückt. Es gibt auch eine neue Live-Steuerung, um Systeminteraktionen wie Wischen und Gesten freihändig aufzurufen. Sorgen Sie sich nicht um den Datenschutz: Künstliche Intelligenz auf dem Gerät und maschinelles Lernen sorgen dafür, dass Eye-Tracking-Daten sicher auf dem Gerät geschützt sind und nicht an Apple weitergegeben oder in die Cloud hochgeladen werden.

Fahrzeugbewegungshinweise machen Passagiere weniger krank im Auto

Mein iPhone macht mich immer krank im Auto, deshalb bin ich froh, dass Apple an einer Funktion arbeitet, um Schwindel, Übelkeit und Erbrechen bei vielen Menschen zu lindern Gefühl, wenn man in einem fahrenden Fahrzeug auf sein Telefon starrt.

Vehicle Motion Cues hilft, Reisekrankheit zu reduzieren, indem es Punkte unterschiedlicher Größe entlang der Displayränder anzeigt, die auf Fahrzeugbewegungen reagieren. Wenn ein Fahrzeug nach links abbiegt, verschieben sich die Punkte nach rechts und umgekehrt. Ebenso werden die Punkte beim Beschleunigen und Bremsen vertikal animiert.

Reisekrankheit wird durch eine Diskrepanz zwischen dem, was Sie sehen und fühlen, verursacht. Dies stört das Vestibularsystem in Ihrem Innenohr, das elektrische Signale an Ihr Gehirn weiterleitet (wie ein Gyroskop), um die notwendigen Anpassungen vorzunehmen, um Ihren Körper im Gleichgewicht zu halten.

Sensoren in Ihrem iPhone und iPad erkennen, wenn Sie sich in einem fahrenden Fahrzeug wie einem Auto, einem Zug, einem Flugzeug, einem Boot oder einem Fahrgeschäft in einem Vergnügungspark befinden, um bei Bedarf Fahrzeugbewegungshinweise zu aktivieren. Außerdem können Sie die Funktion im Kontrollzentrum manuell umschalten, sofern „Fahrzeugbewegungshinweise“ zu „Enthaltene Steuerelemente“ unter „Einstellungen“ > „Kontrollzentrum“ hinzugefügt wurde.

Music Haptics lässt Sie die Musik buchstäblich spüren.

Music Haptics ist eine weitere kommende Barrierefreiheitsfunktion, von der alle profitieren werden, nicht nur Menschen mit Hörbehinderungen. Sie hören nicht nur Ihre Musik und folgen den zeitsynchronisierten Liedtexten, sondern spüren sie auch buchstäblich durch benutzerdefinierte Taps, Texturen und verfeinerte Vibrationen, die von der Musik, die Sie gerade hören, beeinflusst werden.

Music Haptics nutzt die Taptic Engine, den hochentwickelten Vibrationsmotor des iPhones, der eine Reihe subtiler Vibrationsmuster erzeugen kann. Da in iPads und Macs keine Taptic Engines vorhanden sind, ist die Music Haptics-Funktion auf das iPhone beschränkt.

Sie können aus einem Song eine benutzerdefinierte Vibration erstellen, indem Sie auf den Bildschirm tippen, um ihn an den Beat anzupassen. Gehen Sie zu „Einstellungen“ > „Töne & Haptik“, wählen Sie einen Ton wie „Textton“ aus und wählen Sie „Haptik“ > „Neue Vibration erstellen“.

Music Haptics wird für alle Songs im Apple Music-Katalog verfügbar sein. Apple wird Entwicklern außerdem eine API zur Verfügung stellen, um Musik in ihren Apps „zugänglicher“ zu machen.

Vocal-Shortcuts zum Auslösen von Aktionen ohne „Hey Siri“

Die Vocal-Shortcuts-Funktion verbessert die Automatisierung, indem Sie Shortcuts mit Ihrer Stimme starten können, ohne den „Hey Siri“- oder „Siri“-Aufruf. Sie zeichnen eine benutzerdefinierte Äußerung auf und weisen ihr über die Shortcuts-App eine gewünschte Aktion oder eine gespeicherte Automatisierung zu.

Sie könnten beispielsweise „Ringe“ der Aktion „Aktivitätsringe anzeigen“ in der Shortcuts-App zuweisen. Um dann Ihre Aktivitätsringe anzuzeigen, sagen Sie laut „Rings“, ohne dem Sprachbefehl einen „Hey Siri“- oder „Siri“-Aufruf voranstellen zu müssen.

Sprachsteuerung für die freihändige Navigation in CarPlay

Mit Siri können Sie viele CarPlay-Aktionen freihändig ausführen, z. B. Anrufe tätigen, Nachrichten senden und den Wetterbericht prüfen. Mit der Sprachsteuerung können Sie mit Ihrer Stimme auf der CarPlay-Benutzeroberfläche navigieren, Apps starten und zwischen ihnen wechseln und vieles mehr.

Durch die Integration der Freisprechsteuerung in CarPlay wird die Sprachsteuerung zu einer wichtigen Sicherheitsfunktion.

Die Sprachsteuerung ist seit vielen Jahren auf dem iPhone, iPad und Mac verfügbar. Mit dieser oft übersehenen Funktion können Sie beispielsweise Ihr iPhone mit Ihrer Stimme entsperren. Unter iOS 18 unterstützt die Sprachsteuerung komplexe Wörter und benutzerdefiniertes Vokabular.

Leckerbissen: Virtuelles Trackpad, Hover-Typing und mehr

iOS 18, iPadOS 18 und macOS 15 werden weitere bemerkenswerte Barrierefreiheitsfunktionen bringen. Mit dem virtuellen Trackpad können Sie einen kleinen Bildschirmbereich definieren, der als größenveränderbares Trackpad fungiert (nicht zu verwechseln mit dem vorhandenen Tastatur-Trackpad-Modus).

Bei der Hover-Eingabe wird beim Tippen größerer Text über einem Textfeld angezeigt. Wenn Sie wie ich kleine Schriftarten in Webformularen und Textfeldern nicht ausstehen können, ist Hover Typing eine nützliche Funktion.

Magnifier erhält einen minimalistischen Lesemodus, um gescannten Text aus Bildern in Rohtext umzuwandeln, wie der Lesemodus in Safari. Apple sagte außerdem, dass iOS 18 iPhone 15-Besitzern ermöglichen wird, Magnifier durch Drücken der Aktionstaste direkt in den Erkennungsmodus zu starten.

Live Speech funktioniert mit Live-Untertiteln. Personal Voice wird auf Mandarin-Chinesisch verfügbar sein. Mac-Besitzer können die VoiceOver-Tastenkombination anpassen. Eine weitere neue Funktion namens „Auf atypische Sprache achten“ wird Millionen von Menschen mit Erkrankungen, die die Sprache beeinträchtigen, wie Zerebralparese, amyotropher Lateralsklerose (ALS) oder Schlaganfall, dabei helfen, sich leichter mit Siri zu unterhalten und die Spracherkennung zu nutzen.

Neben der Sprachsteuerung unterstützt CarPlay auch Farbfilter und Tonerkennung, die Sie über Benachrichtigungen auf Autohupen und Sirenen aufmerksam machen.

Barrierefreiheit für alle

Mehrere Jahre in Folge hat Apple im Vorfeld des Global Accessibility Awareness Day im Mai kommende Barrierefreiheitsfunktionen vorgestellt. Diese rechtzeitigen Ankündigungen dienen als Auftakt zur jährlichen Worldwide Developers Conference (WWDC) von Apple im Juni, bei der das Unternehmen einen Ausblick auf alle wichtigen Fortschritte und neuen Funktionen seiner Softwareplattformen gibt.

Alle Augen werden auf Apple gerichtet sein, da die diesjährige WWDC voraussichtlich als Startrampe für die angeblichen generativen KI-Funktionen, großen Sprachmodelle und anderen KI-Verbesserungen für iOS 18, iPadOS 18, macOS 15 und watchOS 11 dienen wird , tvOS 18 und visionOS 2 im Herbst.