Seit einiger Zeit ermöglicht GitHubs Copilot Programmierern, mithilfe von KI Code zu schreiben, zu verbessern, zu diskutieren und zu debuggen. Nun tritt Meta auf den Plan und veröffentlicht Code Llama, ein eigenes KI-Modell, das auf Llama 2 basiert, um Programmierern zu helfen.
Llama 2 ist eine erweiterte Version des großen Sprachmodells Llama. In einem Blogpost betonte Meta, dass ein offener Ansatz hier die beste Wahl ist. Deshalb wird Code Llama unter der gleichen Community-Lizenz wie Llama 2 veröffentlicht, wodurch der KI-Helfer kostenlos für Forscher und kommerzielle Nutzung verfügbar ist.
Das kann Code Llama
Code Llama erfüllt alle Erwartungen, die an einen KI-Coder gestellt werden könnten. Er kann in natürlicher Sprache kommunizieren, Code diskutieren, Code vervollständigen und selbst Code schreiben.
So kann beispielsweise die Anfrage „Schreiben Sie mir eine Funktion, die die Fibonacci-Folge ausgibt“ von Code Llama problemlos bearbeitet werden. Das Tool unterstützt viele der meistgenutzten Programmiersprachen, darunter Python, C++, Java, PHP, TypeScript (JavaScript), C#, Bash und weitere.
Code Llama kommt in 3 Größenordnungen
Der KI-Helfer für Programmierer wird in drei Größenordnungen angeboten, die alle mit 500 Milliarde Tokens an Code und codebezogenen Daten trainiert wurden. Code Llama arbeitet entweder mit 7 Milliarde, 13 Milliarde oder 34 Milliarde Parametern.
Während die Version mit 34 Milliarde Parametern die besten Ergebnisse liefert, ist sie auch dementsprechend langsam. Die Version mit 7 Milliarde Parametern hingegen läuft am besten auf Systemen mit einer einzigen GPU und eignet sich für Aufgaben, die wenig Latenz benötigen, wie das Codieren in Echtzeit.
Die 7-Milliarde- und 13-Milliarde-Modelle sind mit einer Fill-in-the-Middle-Funktion trainiert und können bestehenden Code durch weiteren Code ergänzen.
Mit der Veröffentlichung von Code Llama will Meta Programmierern bei ihren wiederkehrenden Aufgaben helfen und ihnen die Möglichkeit geben, effizienter zu arbeiten und sich auf die wichtigen Aufgaben zu konzentrieren.
Da Code Llama unter einer offenen Lizenz und kostenlos verfügbar ist, wird es spannend sein, zu beobachten, wie dieses Tool die Softwareentwicklung in den kommenden Jahren beeinflussen wird.