Q4_K_M
Kompakt und praktisch als erste Wahl. Hier beginnen, ausser du weisst bereits, dass dein System genug RAM oder VRAM fuer groessere Varianten hat.
PB_qwen3_5_9b_dora-Q4_K_M.gguf
PowerBASIC-fokussierte Qwen 9B DoRA GGUF Modellvarianten fuer lokale KI-Runtimes wie LM Studio, Ollama, llama.cpp-kompatible Tools, KoboldCpp, text-generation-webui und andere lokale GGUF-faehige Inferenzumgebungen.
Wenn du lokal mit KI-Tools arbeitest und den Fokus bewusst auf PowerBASIC-Code legst, sind diese Modelle als gute Zusatzoption gedacht. Wähle die Quantisierung nach deinem verfügbaren RAM/VRAM: Q4_K_M für einen sparsamen Einstieg, Q5_K_M/Q6_K für mehr Qualität oder Q8_0 für maximale Präzision.

Beginne mit Q4_K_M, ausser du weisst sicher, dass dein Rechner genug Speicher fuer groessere Varianten hat.
Nutze Q5_K_M oder Q6_K, wenn du staerkere Ausgabequalitaet willst und mehr Speicher einsetzen kannst.
Nutze Q8_0 nur fuer leistungsfaehige Hardware, Archivierung, Konvertierung oder Referenz-Workflows.
Alle aktuellen Modell-Dateien und Release-Informationen liegen in einem Repo mit konsistenten Dateinamen, Metadaten und direkten Download-Links.
Online auf Hugging Face: https://huggingface.co/Theogott/pb-qwen3_5-9b-powerbasic-ggufs
Kompakt und praktisch als erste Wahl. Hier beginnen, ausser du weisst bereits, dass dein System genug RAM oder VRAM fuer groessere Varianten hat.
PB_qwen3_5_9b_dora-Q4_K_M.gguf
Ein starker Mittelweg mit besserer Ausgabequalitaet, bleibt aber fuer viele lokale KI-Setups noch gut handhabbar.
PB_qwen3_5_9b_dora-Q5_K_M.gguf
Geeignet, wenn mehr Speicher fuer staerkere Antworten und stabileres codeorientiertes Verhalten verfuegbar ist.
PB_qwen3_5_9b_dora-Q6_K.gguf
Fuer leistungsfaehige Hardware, wenn Qualitaet wichtiger ist als Downloadgroesse und Speicherbedarf.
PB_qwen3_5_9b_dora-Q8_0.gguf
Fuer anspruchsvolle Workflows mit hoher Genauigkeit, z. B. Codeanalyse, Konvertierung und detailierte Tests.
PB_qwen3_5_9b_dora-F16.gguf
Online auf Hugging Face: https://huggingface.co/Theogott/pb-qwen3_5-9b-powerbasic-ggufs
SPR-Variante fuer PowerBASIC-zentrierte Inferenz und lokale Automatisierungs-Workflows.
spr_qwen3_5_9b_dora_q4_k_m.gguf
VRAM-schonende Variante mit reduzierter Speicherbelastung bei weiterhin stabilem Verhalten.
spr_qwen3_5_9b_dora_vramsafe_q4_k_m.gguf
Hohe Qualitaet mit kontrollierterem VRAM-Einsatz.
spr_qwen3_5_9b_dora_vramsafe_q6_k.gguf
Fuer bessere Ausgabequalitaet in lokalen Runtimes mit ausreichend Speicher.
spr_qwen3_5_9b_dora_vramsafe_q8_0.gguf
Höhere Präzisionsvariante für anspruchsvolle Inferenz- und Konvertierungs-Workflows.
spr_qwen3_5_9b_dora_vramsafe_bf16.gguf