Zum Inhalt springen
iphone-ticker.de

Nach dem Sehen kommt das Hören

Audio Intelligence: Apples neuer KI-Bereich hört zu

Audio Intelligence: Apples neuer KI-Bereich hört zu

Mit der „Visuellen Intelligenz“ hat Apple bereits einen eigenen Bereich geschaffen, in dem das iPhone seine Kamera nutzt, um die Umgebung zu erfassen und Informationen zu Gegenständen, Orten oder Texten bereitzustellen. Apple beschreibt die Funktion inzwischen als festen Bestandteil von Apple Intelligence. Nun bekommt auch das Hören einen vergleichbaren Überbau.

Siri Audio Intelligence 2500

Unter dem Namen „Audio Intelligence“ fasst Apple vier Funktionen der Apple Watch Series 12 und Apple Watch Ultra 4 zusammen. Dazu gehören Siri Recap, Live Rewind, die automatische Musikerkennung mit Shazam und die Geräuscherkennung. Apple selbst spricht von einer neuen Klasse von Apple-Intelligence-Funktionen.

Damit geht es nicht nur darum, Gespräche mit künstlicher Intelligenz auszuwerten. Siri Recap erstellt Zusammenfassungen längerer Unterhaltungen. Den technischen Ablauf haben wir bereits ausführlich beschrieben. Live Rewind kann nach einem Doppeldruck auf die Digitale Crown die vorausgegangenen 15 Sekunden eines Gesprächs als Text zurückholen. Shazam erkennt Musik in der Umgebung, während die Geräuscherkennung unter anderem auf Sirenen, Alarme und Türklingeln reagieren kann.

Vier Funktionen unter einem neuen Oberbegriff

Der neue Name ist deshalb vor allem als Klammer zu verstehen. Ähnlich wie die Visuelle Intelligenz unterschiedliche Aufgaben rund um Kamera und Bilder bündelt, ordnet Audio Intelligence verschiedene Formen der akustischen Wahrnehmung unter Apple Intelligence ein. Die einzelnen Funktionen arbeiten dabei keineswegs identisch.

S11 Prozessor

Gemeinsam ist ihnen die technische Grundlage auf der Apple Watch. Alle vier verwenden den S11-Chip und dessen sogenannte Secure Exclave. Dieser hardwareseitig abgeschottete Bereich verarbeitet Audiodaten getrennt vom restlichen System. Das Betriebssystem, Apps, der Nutzer selbst und Apple sollen keinen Zugriff auf die dort befindlichen Rohdaten erhalten. Statt dauerhaft gespeicherter Aufnahmen arbeitet das System mit einem fortlaufend überschriebenen Audiopuffer.

Vom lokalen Geräusch bis zur Cloud-Zusammenfassung

Wie weit die Audiodaten anschließend verarbeitet werden, hängt von der jeweiligen Funktion ab. Die Geräuscherkennung arbeitet direkt auf der Apple Watch. Bei Shazam wird aus dem Audiosignal zunächst eine nicht zurückrechenbare akustische Signatur erzeugt und nur diese zur Identifikation an Shazam übertragen. Live Rewind nutzt zusätzlich das gekoppelte iPhone für die Spracherkennung. Siri Recap geht noch einen Schritt weiter und lässt den zuvor lokal transkribierten und gekürzten Text von Private Cloud Compute zusammenfassen.

Audio Intelligence Iphone2 2500

Apple macht mit Audio Intelligence damit ein weiteres klar benanntes Teilgebiet innerhalb von Apple Intelligence auf. Während die Visuelle Intelligenz Kamera und Bildschirminhalte als Ausgangspunkt nimmt, wird nun auch die akustische Wahrnehmung der Geräte zu einer eigenen Kategorie. Weitere Details zur neuen Sammelkategorie und ihrer technischen Umsetzung hat Apple in einem Support-Dokument zu Audio Intelligence sowie in einem ausführlichen Datenschutzpapier (PDF-Download) veröffentlicht.

Fehler gefunden?

Passend dazu aus dem Archiv

Drei Artikel zum Weiterlesen

20 Kommentare bisher.

Dieser Unterhaltung fehlt Deine Stimme.
  • Diese Kategorie gefällt mir bis jetzt am wenigsten. Ich hoffe, dass sie sich auch komplett deaktivieren lässt. Auf Befehl gerne zuhören, aber nicht 7/24.

    Als Bedienungshilfe sieht es dann anders aus. Dort kann ich es gut verstehen.

  • Gruselig. Wenn das die Zukunft ist überall „abgehört“ zu werden.
    Ich hoffe das Betriebe dagegen steuern und das Tragen solch Geräte auf Firmengelände zu verbieten. Egal ob es Apple oder andere Geräte von anderen Firmen sind.

  • Ist halt sehr unwahrscheinlich, dass Audio Intelligence jemals in der EU veröffentlicht wird. Visual Intelligence war übrigens schon immer Bestandteil von Apple Intelligence. Nur wurde das mit iOS 27 außerhalb der EU in die Kamera-App integriert, während es früher und bei uns auch jetzt noch nur über den Kamera-Knopf oder das Kontrollcenter aufrufbar war/ist.

    • Wie kommst du da drauf! Nur weil es von Apple ist? Gibt schon mehrere Anbieter davon. Selbst habe ich ein KI-Gerät das an der Rückseite vom iPhone haftet und 24/7 alles aufzeichnet und, wer hätte es gedacht, genau das macht was die Apple Watch dann kann. Und nö, muss man niemanden mitteilen und selbst wenn, würde ich es keinem sagen um irgendwelchen Diskussionen aus dem Weg zu gehen. Es wird nämlich weder das Audio gespeichert noch ein 1:1 Transkript erstellt.

      • So sehe ich das auch. Ich nutze das von Plaud Note Pro. Richtig geiles Teil. Ich sag mal so, möchte man das Gerät nicht nutzen, so fragt man jeden, ob man darf.

      • Wofür verwendet man sowas?

  • Ich habe einen Plaud-Pin. Die Funktion an der Apple Watch ist nett, aber würde mir nicht reichen. Ich schalte das morgens ein und erst am Abend aus und habe dann ein Transkript vom Tag, egal ob Arbeit, Edeka, Restaurant usw. Das ist extrem praktisch und würde ich nicht mehr missen wollen. Trage ihn neben meinen Kullis an der Brusttasche und selbst mit Sakko drüber klappt es ausreichend gut.

    • Ich habe da auch mal drüber nachgedacht. Aber mir fällt beim besten Willen keine usecase ein, der so einen Kauf für mich rechtfertigen würde. Also liest du dir diese Transskripte echt regelmäßig durch?

    • Wenn 24/7 alles transkribiert wird, welche Kosten hast Du da Hubert?

    • Wenn du schreibst, selbst mit Sakko darüber, dann klingt das für mich nach heimlicher Aufnahme ohne, dass Dein Gegenüber darüber Bescheid weiß. Das halte ich nicht nur für bedenklich, sondern eher für anzeigepflichtig, außer Du informierst einen jeden darüber im Voraus.

      • Josen das klingt aus deinem Mund als wären wir im Jahr 1940. Jetzt im 2026 ist Ki -> Standard und wenn ein Hersteller mir ein Gerät anbietet, um genau diese besagte Funktion nutzen zu dürfen, dann mache ich das. Mit deiner Sprge musst du an den Hersteller ran und nicht die armen Consumer.

    • Und was machst du mit en Informationen – Tagebuch schreiben? Wenn man nicht gerade ein Alibi benötigt – welchen Wert haben die Infos denn?

      • Abgesehen davon, dass man zum Transkribieren eines ganzen Tages ein Unlimited Abo braucht, ist es schon cool, am Ende des Tages, das Plaud zu fragen: Was war denn heute wichtig für mich?

        Und dann hat man seine Top5-Themen oder Fakten. Diese kann man für sein eigenes persönliches Wachstum oder auch berufliche Erkenntnisse nutzen. Das ist ein Trick für kluge Menschen, die noch klüger werden wollen. Nun wurde dieser hier verraten.

      • Mich triggert dieser Kommentar unglaublich.
        Ihr begeht hier eine rechtliche Straftat. Ich hoffe ihr geratet an den richtigen der euch verklagt

  • Ich kann mir Live Rewind als sehr nützlich vorstellen.

    Ich habe in Bahn und Bus oft Durchsagen nicht vollständig mitbekommen,
    und eine nachträgliche Darstellung fände ich praktisch.

    Die Frage ist nur, wie gut das in einer lauten Umgebung mit vielen Gesprächen funktioniert, etwa in öffentlichen Verkehrsmitteln.

    Ja, ich sehe durchaus die Gefahr, dass fremde oder eigene Gespräche mit transkribiert werden könnten.

    Im privaten Umfeld, sicherlich auch sehr lustig, wenn man bei familiären Festen nicht mehr mit der Aussage „… das hab ich nicht gesagt …“ davonkommt. ;-))

  • Ich sehe eure Punkte. Aber stellt euch mal vor, was das für Nicht-Hörende bedeuten kann. Mit einer Standard Uhr bekommen sie so viel wertvolle Unterstützung.

  • Redet mit. Seid nett zueinander!

    Deine E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert

    Zuletzt auf iphone-ticker.de

    Zur Startseite