Die Top-KI-Funktionen, die Apple auf der WWDC 2024 angekündigt hat

Heute markierte den Beginn von Apples WorldWide Developer Conference (WWDC), dem jährlichen Ereignis, bei dem Apple einige der größten Funktionen ankündigt, die auf seine Geräte, Apps und Software zukommen. Und die diesjährige WWDC ist eine echte Sensation. Dank Apples neuem - und umfangreichen - Investition in generative KI-Technologie hatte das Unternehmen viel auf der KI-Front zu präsentieren, von einem verbesserten Siri bis zu KI-generierten Emojis.

Apple kündigte eine Partnerschaft mit OpenAI an, um ChatGPT, OpenAIs KI-gestützte Chatbot-Erfahrung, auf eine Reihe seiner Geräte zu bringen. Es stellte neue Fotobearbeitungswerkzeuge vor, um Objekte und Personen aus Fotos zu entfernen. Und es führte eine KI-Fähigkeit ein, Texte über Inhalte hinweg zu korrigieren, umzuschreiben und zusammenzufassen, einschließlich Notizen und E-Mails.

Neues Siri

Siri wurde in diesem Jahr dank Apples übergreifender generativer KI-Initiative namens Apple Intelligence überarbeitet.

Dank Apple Intelligence kann Siri - der ein neues Aussehen erhalten hat, mit einem neuen Symbol und einer leuchtenden Anzeige um den Rand des Bildschirms eines Geräts - jetzt mit Stottern in der Sprache umgehen und den Kontext besser verstehen. Sie können jetzt auch mit Siri tippen und sie kann Fragen beantworten, auch Fragen zur Verwendung Ihres iPhones, iPads oder Macs.

Bildnachweis: Apple

Bald wird Siri mit mehr Fähigkeiten ausgestattet sein, um Bildschirmbewusstsein und die Fähigkeit zur Handlung in und zwischen Apps zu haben - so können Sie Siri beispielsweise fragen, "machen Sie dieses Foto lebendig" und dann "fügen Sie dieses Foto" in eine andere App ein. Während des WWDC-Keynotes am Montag gab Apple das Beispiel von Siri, der ein Foto Ihres Ausweises findet, Ihre Ausweisnummer extrahiert und diese in ein Webformular für Sie eingibt.

Um das neue Siri nutzen zu können, benötigen Sie ein Apple-Gerät, das Apple Intelligence unterstützt - speziell das iPhone 15 Pro und Geräte mit M1- oder neueren Chips.

ChatGPT-Integration

Apple bringt ChatGPT zu Siri und anderen First-Party-Apps und Funktionen über seine Betriebssysteme.

Siri-Benutzer können in Kürze Fragen an ChatGPT für "Expertise" stellen, wo sie hilfreich sein könnte, sagt Apple. Sie können Fotos mit den Fragen, die Sie ChatGPT über Siri stellen, einschließen oder Fragen zu Ihren Dokumenten oder PDFs stellen.

Bildnachweis: Apple

Apple hat ChatGPT auch in OS-weite Tools wie Writing Tools (powered by Apple Intelligence) integriert, mit denen Sie Inhalte mit ChatGPT erstellen können - einschließlich Bilder - oder eine erste Idee vorschlagen und an ChatGPT senden können, um eine Überarbeitung oder Variation zurückzuerhalten.

ChatGPT-Integrationen werden später in diesem Jahr auf iOS 18, iPadOS 18 und macOS Sequoia verfügbar sein, sagt Apple, und sie werden kostenlos ohne die Notwendigkeit eines ChatGPT- oder OpenAI-Kontos sein. Anfangs werden sie vom GPT-4o, OpenAIs kürzlich eingeführtem Flaggschiff-generativen KI-Modell, unterstützt.

Genmoji und Image Playground

Genmoji, bald auf iOS 18 auf Geräten, die Apple Intelligence unterstützen, ermöglicht es Ihnen, KI-Emoji-ähnliche Bilder von jedem in Ihrer Fotobibliothek zu erstellen - oder einfach benutzerdefinierte Emojis. Genmoji kann als Sticker zum Reagieren auf Nachrichten mit einem Tapback oder inline mit Ihren Nachrichten verwendet werden, sagt Apple.

Eine separate neue Bildgenerierungsfunktion ermöglicht es iPhone-Benutzern, KI-Bilder von Personen zu erstellen, mit denen sie chatten. Apple Intelligence wird ein Verständnis dafür haben, mit wem Sie chatten, sagt Apple - also, wenn Sie den Chat mit einem individuellen KI-Bild personalisieren möchten, können Sie dies spontan tun.

Bildnachweis: Apple

Es gibt auch Image Playground, eine neue Bildgenerierungsfunktion, die in Apps wie Notes, Freeform, Keynote und Pages funktioniert.

Als eigenständige App und API für Entwickler verfügbar, ermöglicht Image Playground Benutzern, Bilder mit Konzepten wie Themen, Kostümen, Accessoires, Orten und mehr zu erstellen. Sie wählen die Themen aus, die Sie einschließen möchten, und Minuten später erstellt Image Playground eine Vorschau Ihres Bildes.

KI-Fotobearbeitung

Apples neues Reinigungswerkzeug, das in die aktualisierte Photos-App integriert ist, entfernt unerwünschte Personen und Objekte aus Bildern.

Die Clean Up-Funktion kann auf jedes Bild in Photos angewendet werden, indem das zu entfernende Element - oder die Person - umkreist oder hervorgehoben wird. Mithilfe von KI entfernt Clean Up das ausgewählte Element und ersetzt es durch kontextuell bewusste Pixel, um zu versuchen, es so erscheinen zu lassen, als ob das Element (oder die Person) nie da gewesen wäre.

Bildnachweis: Apple

Auf dem Gebiet der Fotos ist es dank KI jetzt besser organisiert. Mit iOS 18 wird Photos automatisch Fotosammlungen nach Themen wie Zeit, Personen, Lieblingserinnerungen, Reisen und mehr anzeigen. Und Sie können spezifischere Begriffe verwenden, um über Fotos zu suchen.

Transkribierte Anrufe

Bald auf dem iPhone 15 Pro und neueren Modellen wird iOS optional Ihre Telefonanrufe aufzeichnen und transkribieren.

Die Funktion - die manuell aktiviert werden muss und die die andere Partei am anderen Ende der Leitung darüber informiert, dass der Anruf aufgezeichnet wird, um nicht gegen Datenschutzgesetze zu verstoßen - transkribiert, was während des Anrufs gesagt wird, und bietet dann eine Zusammenfassung der wichtigsten besprochenen Punkte in der Notes-App von iOS.

Apple erwähnte (wortspiel beabsichtigt) während der Keynote am Montag, dass Sie auch Audio innerhalb der Notes-App aufnehmen und transkribieren können.