Beschreibung
BgGPT-Gemma-2-27B-IT-v1.0 ist ein hochmodernes bulgarisches Sprachmodell, das von INSAIT, einem Teil der Universität Sofia St. Kliment Ohridski, erstellt wurde. Es basiert auf den Modellen von Googles Gemma 2 27B und wurde mit etwa 100 Milliarden Tokens vortrainiert, davon 85 Milliarden in Bulgarisch. Dieses umfangreiche Vortraining, das die Branch-and-Merge-Strategie verwendet, verbessert seine kulturellen und linguistischen Fähigkeiten im Bulgarischen, während die Leistung in Englisch erhalten bleibt.
Weiterlesen
Das Modell wurde mit einem bulgarischen Instruktionsdatensatz, der aus realen Gesprächen abgeleitet wurde, instruktionsfeinabgestimmt. Es wurde anhand verschiedener Benchmarks evaluiert, darunter Winogrande, Hellaswag, ARC Easy/Challenge, TriviaQA, GSM-8k und MON-Prüfungen, und zeigt überlegene Leistungen in logischem Denken, Mathematik und Sprachverständnis.
BgGPT-Gemma-2-27B-IT-v1.0 übertrifft größere Modelle wie Alibabas Qwen 2.5 72B und Metas Llama3.1 70B in bulgarischen Aufgaben. Es glänzt auch in der Chat-Leistung und übertrifft kleinere Varianten kommerzieller Modelle wie Anthropics Claude Haiku und OpenAIs GPT-4o-mini und erreicht die besten kommerziellen Modelle in der bulgarischen Chat-Leistung.
Das Modell ist zur Verwendung mit der 🤗 Transformers-Bibliothek verfügbar und unterstützt die Integration mit vLLM und GGML/llama.cpp-Formaten. Es wird unter den Gemma-Nutzungsbedingungen verteilt und begrüßt das Feedback der Community, um seine Leistung weiter zu optimieren.
- KategorieKI-Modelle & LLMs
- PreismodellOpen Source
- BereitstellungCloud
- PlattformenWeb
BgGPT-Gemma-2-27B-IT-v1.0 im Überblick
Hochmodernes bulgarisches Sprachmodell
Basierend auf Googles Gemma 2 27B
Vortrainiert mit 100 Milliarden Tokens
Instruktionsfeinabgestimmt mit realen Gesprächen
Überlegene Leistung in bulgarischen Aufgaben
Übertrifft größere Modelle
Unterstützt die Integration mit 🤗 Transformers
Verbreitet unter Gemma-Nutzungsbedingungen
Erste Schritte mit BgGPT-Gemma-2-27B-IT-v1.0
Zugangsseite: Besuchen Sie die Hugging Face-Modellseite
Modell laden: Verwenden Sie die 🤗 Transformers-Bibliothek
Umgebung konfigurieren: Empfohlene Parameter festlegen
Integrieren: Verwenden Sie vLLM oder GGML/llama.cpp
Feinabstimmung: Instruktionsformat anwenden
BgGPT-Gemma-2-27B-IT-v1.0's Anwendungsfälle
- Sprachübersetzung
- Kulturelle Analyse
- Chat-Anwendungen
- Bildungswerkzeuge
- Inhaltserstellung
