Apple und NVIDIA bündeln ihre Kräfte, um die Zukunft der KI-Texterstellung zu revolutionieren. Im Zentrum dieser Zusammenarbeit steht ReDrafter, eine von Apple entwickelte Methode zur Optimierung der Texterzeugung durch Large Language Models (LLMs). Gemeinsam mit NVIDIAs Technologie bringt diese Partnerschaft bahnbrechende Verbesserungen in Effizienz und Geschwindigkeit.
Apple hat ReDrafter als Open-Source-Projekt entwickelt, um Entwicklern die Möglichkeit zu geben, fortschrittliche Texterstellungsmodelle zu nutzen. Diese Technologie verbessert die Effizienz und Genauigkeit von LLMs erheblich und ist darauf ausgelegt, kohärente und relevante Texte schneller zu generieren als herkömmliche Methoden.
Mit NVIDIA kommt nun ein starker Partner ins Spiel. Die Integration von ReDrafter in TensorRT-LLM, NVIDIAs optimierten Deep-Learning-Beschleuniger, hebt die Leistungsfähigkeit auf ein neues Niveau. TensorRT-LLM wurde speziell für die effiziente Ausführung von LLMs auf GPUs entwickelt und durch neue Operatoren und erweiterte Funktionen optimiert.
Erste Benchmarks zeigen deutliche Fortschritte: Durch die Nutzung von ReDrafter in Kombination mit NVIDIA-GPUs konnte die Geschwindigkeit der Token-Generierung während der Greedy-Decodierung verdreifacht werden. Diese Technik wählt in jedem Schritt das wahrscheinlichste nächste Wort und ermöglicht dadurch flüssige und logische Textausgaben.
Die Vorteile sind vielfältig:
Diese Partnerschaft markiert einen wichtigen Schritt in der Weiterentwicklung von LLM-Technologien. Apples Innovationskraft kombiniert mit NVIDIAs GPU-Expertise sorgt nicht nur für schnellere und effizientere KI-Systeme, sondern könnte auch den Standard für Texterzeugung auf ein völlig neues Niveau heben.
Mit ReDrafter und TensorRT-LLM könnte sich die Art und Weise, wie wir mit KI interagieren, nachhaltig verändern – schneller, präziser und ressourcenschonender.
Via Apple Machine Learning Research
Elon Musks KI-Startup xAI hat die Social-Media-Plattform X (ehemals Twitter) übernommen. Der Deal bewertet X mit 33 Milliarden US-Dollar und…
Als Antwort auf die von US-Präsident Donald Trump angekündigten Autozölle in Höhe von 25 Prozent bringt Außenministerin Annalena Baerbock eine…
Apple hat heute eine überarbeitete Release Candidate (RC) Version von iOS 18.4 mit der Build-Nummer 22E240 veröffentlicht. Diese ersetzt die…
Nintendo hat am Donnerstag die neue App „Nintendo Today!“ für das iPhone veröffentlicht. Die App liefert täglich Neuigkeiten, Videos und…
Der französische Spieleentwickler Ubisoft hat eine neue Tochtergesellschaft im Wert von rund 4 Milliarden Eurogegründet. In diese wird der chinesische…
Apple hat am Donnerstag eine zweite Release-Candidate-Version von macOS Sequoia 15.4 für Entwickler:innen bereitgestellt. Diese neue Testversion folgt nur wenige…
Diese Website benutzt Cookies um Ihr Nutzererlebnis zu verbessern. Wenn Sie diese Website weiter nutzen, gehen wir von Ihrem Einverständnis aus.
Mehr lesen