Forschungsprojekt OpenGPT-XGroßes KI-Sprachmodell veröffentlicht
Das große KI-Sprachmodell des Forschungsprojekts OpenGPT-X steht ab sofort auf Hugging Face zum Download bereit: »Teuken-7B« wurde von Grund auf mit den 24 Amtssprachen der EU trainiert und umfasst 7 Mrd. Parameter.
Das Diagramm zeigt die zusätzliche Rechenleistung, die erforderlich ist, um einen nicht-englischen Text mit dem zu dem Sprachmodell zugehörigen Tokenizer zu verarbeiten (in % im Vergleich zu Llama 3). Teuken-Modelle benötigen im Vergleich die geringste Menge an zusätzlicher Rechenleistung und verursachen somit den geringsten Aufpreis für multlinguale Anfragen an das Modell. © Fraunhofer IAIS

