Meta bestätigt die Entwicklung von 405B-Parameter Llama 3.1 als Konkurrenz zu GPT-4o

Meta hat offiziell bestätigt, dass das Training seines großen Sprachmodells der nächsten Generation, Llama 3.1, läuft. Diese deutlich leistungsstärkere Version ist darauf ausgelegt, direkt mit den fortschrittlichsten Modellen der Branche zu konkurrieren, darunter OpenAIs GPT-4o und Googles Gemini 1.5 Pro. Die Ankündigung unterstreicht Metas Ambition, nicht nur in der Open-Source-Community führend zu sein, sondern auch weltweit Spitzenleistungen zu erzielen.

Laut einem Blogbeitrag des AI@Meta-Teams handelt es sich bei Llama 3.1 um ein 405-B-Parameter-Modell – ein gewaltiger Fortschritt gegenüber der Anfang des Jahres veröffentlichten 70-B-Parameter-Version von Llama 3. Dieses neue Modell wird auf Metas maßgeschneiderter KI-Infrastruktur trainiert, die aus zwei Clustern mit je 24.000 GPUs besteht. Das Unternehmen gab an, dass Llama 3.1 in Schlüsselbereichen wie komplexem Denken, nuancierter Codegenerierung und fortgeschrittener Befehlsausführung deutliche Verbesserungen aufweist.

Während Llama 3 als Open-Source-Modell veröffentlicht wurde, hat Meta die Veröffentlichungsstrategie für die 405B-Version von Llama 3.1 noch nicht bestätigt. Es wird jedoch erwartet, dass bald eine Reihe kleinerer, leichter zugänglicher Versionen verfügbar sein werden. Das Hauptziel des Flaggschiffmodells ist es, eine neue Welle von KI-Funktionen im gesamten Produkt-Ökosystem von Meta zu ermöglichen, darunter ausgefeiltere KI-Assistenten für Instagram, WhatsApp und Messenger sowie die Erweiterung der Funktionen der Ray-Ban-Smart Glasses.

Die Entwicklung von Llama 3.1 unterstreicht das unerbittliche Tempo des KI-Wettrüstens. Mit der Entwicklung eines Modells, das die Leistung seiner Konkurrenten übertreffen soll, stärkt Meta seine Position als wichtiger Akteur im Bereich der grundlegenden Modelle. Der Erfolg und die potenzielle Veröffentlichung eines solch leistungsstarken Modells könnten Entwicklern und Unternehmen eine Open-Source-Alternative bieten, die mit den besten proprietären Systemen mithalten kann und so die Innovation in der gesamten Branche weiter beschleunigt.