machichdigital

Lokale LLMs · Foto: derekGavey, CC BY 2.0

ModellLokale LLM-ModelleLizenz: Apache-2.0

Qwen 3 (klein)

Zuletzt aktualisiert:

⧉ –× kopiert⬇ –× heruntergeladenBewertung:

Typ

Modell

Lizenz

Apache-2.0

Anwendungsfeld

Lokale LLM-Modelle

Voraussetzungen

Keine besonderen — direkt loslegen.

Die kleinen Qwen-3-Varianten können sogar den Thinking-Modus — ein 1.7B-Modell, das „nachdenkt“, ist für Edge-Anwendungen bemerkenswert. Völlig freie Lizenz.

So nutzt du es

Am einfachsten per Ollama: ollama pull <modellname> und dann ollama run <modellname> — oder komfortabel mit LM Studio (grafische Oberfläche, Modell-Suche eingebaut). Die Hardware-Angaben unten beziehen sich auf die übliche 4-Bit-Quantisierung (Q4).

Größen & Hardware

  • Verfügbare Größen: 0.6B / 1.7B / 4B
  • Empfohlene Hardware (Q4): 0.6B: <1 GB · 4B: 4–5 GB

Im Detail

Die kleinen Varianten von Qwen 3 (0.6B, 1.7B, 4B) sind für Edge-Geräte und ressourcenarme Umgebungen gedacht, verzichten aber – anders als viele andere Mini-Modelle – nicht auf den Thinking-Modus. Selbst das 1.7B-Modell kann also vor der Antwort strukturiert nachdenken, was bei kleinen Modellen sonst kaum verfügbar ist und die Qualität bei komplexeren Aufgaben spürbar hebt. Mit unter 1 GB (0.6B) bis 5 GB (4B) Speicherbedarf laufen sie auf schwacher Hardware bis hin zu Smartphones. Die Lizenz ist uneingeschränkt frei nutzbar. Wer ein Sprachmodell auf einem Raspberry Pi, in einer Embedded-Anwendung oder als schnelle lokale Fallback-Lösung braucht, findet hier eine der wenigen Optionen mit echtem Reasoning in dieser Größenklasse.

Praxis-Tipp

Das 1.7B-Modell mit aktiviertem Thinking-Modus für einfache Logikaufgaben auf einem Raspberry Pi testen, etwa „Löse Schritt für Schritt: Wenn A doppelt so alt ist wie B …“.

Siehe auch

Lizenz & Quelle

  • Lizenz: Apache-2.0
  • Quelle: Ollama
  • Quelle: HF

Erfahrungen & Kommentare.

Funktioniert der Modell bei Ihnen? Tipps, Stolperfallen, Varianten — teilen Sie es mit der Community.

Lade Kommentare …

Ihre IP-Adresse wird zum Schutz vor Missbrauch gespeichert und nach 14 Tagen automatisch entfernt (Datenschutz).

Passt dazu.

Llama 3.1

Der Meta-Klassiker mit 128K Kontext. 8B ist ein sehr solider Allrounder für schwächere Hardware, spricht ordentlich Deutsch.

Llama 3.1 Community License♥ –⧉ –

Llama 3.3

Leistet laut Meta ungefähr so viel wie das riesige 405B-Modell — der Preis-Leistungs-Tipp, wenn man 64 GB (z. B. Mac Studio) hat.

Llama 3.3 Community License♥ –⧉ –

Llama 4 (Scout / Maverick)

Metas MoE-Generation mit sehr großem Kontext und Bildverständnis. Für Heim-Hardware meist zu groß — eher für Server/Mac Studio 128 GB+.

Llama 4 Community License (EU-Einschränkungen für multimodale Nutzung beachten!)♥ –⧉ –