Apples neue KI-Modelle für 3D-Modellierung und proaktive Assistenz

Apples KI-Forschung: Neue Modelle für 3D-Modellierung und proaktive Assistenz

Apples Forschungsabteilung für maschinelles Lernen hat zwei neue KI-Modelle vorgestellt, die das Potenzial haben, zukünftige Anwendungen auf iPhones und der Apple Vision Pro deutlich zu erweitern. Die Modelle "Matrix3D" und "Stream Bridge" fokussieren sich auf die Bereiche 3D-Modellierung und proaktive Assistenz.

Matrix3D: Vereinfachte 3D-Modellierung durch KI

Matrix3D zielt darauf ab, die Fotogrammetrie, den Prozess der Erstellung von 3D-Modellen aus Fotos, zu vereinfachen. Herkömmliche Verfahren erfordern eine Vielzahl von Bildern aus verschiedenen Winkeln. Matrix3D hingegen benötigt laut Apple lediglich zwei bis drei Aufnahmen, um ein 3D-Modell zu generieren. Das Modell übernimmt dabei selbstständig Aufgaben wie die Schätzung von Position, Orientierung und Tiefe des Objekts, indem es multimodale Daten aus den Bildern und den Kameraparametern verarbeitet. Trainiert wurde Matrix3D mit "Masked Learning", einer Technik, bei der das Modell bereits im Trainingsprozess nur mit wenigen Bildern und den dazugehörigen Positions-, Orientierungs- und Tiefeninformationen versorgt wird.

Stream Bridge: Ein proaktiver Streaming-Assistent

Das zweite Modell, Stream Bridge, wird von Apple als "proaktiver Streaming-Assistent" beschrieben. Es analysiert Videoinhalte in Echtzeit und ermöglicht Nutzern, Fragen zum Inhalt zu stellen. Beispielsweise könnte ein Nutzer der Apple Vision Pro die KI fragen, was auf einem schwer lesbaren Schild im Video steht. Darüber hinaus kann Stream Bridge die Umgebung des Nutzers über die Kamera analysieren und proaktiv Unterstützung anbieten. So könnte die KI beispielsweise schrittweise Anleitungen zum Malen eines Bildes geben, ohne dass der Nutzer immer wieder neue Anweisungen erfragen muss.

Zukunftsperspektiven und Integration in Apple-Produkte

Ob und wann diese Technologien in Apple-Produkten integriert werden, ist derzeit noch unklar. Die Modelle befinden sich noch in einem frühen Stadium. Es ist jedoch denkbar, dass sie in zukünftigen Versionen der Apple Vision Pro, iPhones oder anderen Apple-Geräten zum Einsatz kommen und die Funktionalität von Diensten wie Apple Intelligence erweitern. Die Entwicklung dieser KI-Modelle unterstreicht Apples Engagement im Bereich der künstlichen Intelligenz und deutet auf zukünftige Innovationen im Bereich der User Experience hin.

Mindverse: Ihr Partner für maßgeschneiderte KI-Lösungen

Mindverse bietet als deutsches Unternehmen umfassende KI-Lösungen für Text, Bild und Recherche. Von Chatbots und Voicebots über KI-Suchmaschinen bis hin zu individuellen Wissensmanagementsystemen – Mindverse entwickelt maßgeschneiderte KI-Lösungen für Unternehmen.

Bibliography:

1. https://t3n.de/news/zukunft-apple-intelligence-ki-modelle-fuer-iphone-vision-pro-1687148/
2. https://www.finanznachrichten.de/nachrichten-2025-05/65397497-die-zukunft-von-apple-intelligence-diese-neuen-ki-modelle-koennten-iphones-und-vision-pro-nuetzlicher-machen-397.htm
3. https://www.threads.com/@t3n_magazin/post/DJoEY5Bh8cY/apple-intelligence-k%C3%B6nnte-k%C3%BCnftig-durch-zwei-neue-ki-modelle-spannende-funktione
4. https://t3n.de/tag/kuenstliche-intelligenz/
5. https://x.com/t3n/status/1922557807187865754
6. https://www.facebook.com/t3nMagazin/posts/apple-intelligence-k%C3%B6nnte-k%C3%BCnftig-durch-zwei-neue-ki-modelle-spannende-funktione/1123215699843581/
7. https://t3n.de/
8. https://t3n.de/tag/smartphone/
9. https://newstral.com/de/article/de/1266650498/die-zukunft-von-apple-intelligence-diese-neuen-ki-modelle-k%C3%B6nnten-iphones-und-vision-pro-n%C3%BCtzlicher-machen