machichdigital
Code-BeispielLangChain / LangGraphLizenz: MITfrei kopierbar

langgraph_self_rag_local.ipynb

Self-RAG mit lokalen LLMs (Ollama).

⬇ Als Datei laden

× kopiert× heruntergeladenBewertung:

Self-RAG mit lokalen LLMs (Ollama).

Für wen: Wie oben, lokal/offline.

So nutzt du es

Das sind Jupyter-Notebooks: herunterladen, pip install langchain langgraph und in Jupyter/VS Code öffnen. Die Notebooks erklären Schritt für Schritt agentische RAG-Muster zum Nachbauen.

Im Detail

Dieselbe Selbstprüf-Logik wie beim Standard-Self-RAG-Notebook, jedoch mit lokalen Modellen via Ollama statt Cloud-APIs. Damit lässt sich die komplette Grounding-Prüfung offline und ohne laufende API-Kosten testen, was besonders für Datenschutz-Anforderungen oder Offline-Umgebungen interessant ist. Da Self-RAG mehrere aufeinanderfolgende Bewertungs- und Generierungsschritte braucht, wirkt sich die geringere Zuverlässigkeit kleinerer lokaler Modelle hier stärker aus als bei einfacheren Pipelines – die Fehleranfälligkeit der Selbstprüfung steigt. Am besten geeignet für Experimente und als Lernvorlage, weniger für produktionsreife Systeme mit hohen Genauigkeitsanforderungen.

Praxis-Tipp

Für stabilere Ergebnisse ein möglichst starkes lokal verfügbares Modell (13B+) verwenden, da die mehrfachen Selbstbewertungsschritte kleine Modelle schnell überfordern.

Siehe auch

Lizenz & Quelle

Inhalt ansehen (langgraph_self_rag_local.ipynb)
Lade …

Erfahrungen & Kommentare.

Funktioniert der Code-Beispiel bei Ihnen? Tipps, Stolperfallen, Varianten — teilen Sie es mit der Community.

Lade Kommentare …

Ihre IP-Adresse wird zum Schutz vor Missbrauch gespeichert und nach 14 Tagen automatisch entfernt (Datenschutz).

Passt dazu.