Ein kleines .NET-Konsolenprogramm, das über Ollama lokal laufende LLM-Modelle (z. B. DeepSeek-R1) anruft und die Antworten in der Konsole schön formatiert und farbig ausgibt.
- Lokal: Läuft komplett auf deiner Maschine (4070 Ti & CUDA)
- REPL: Interaktive Prompt-Schleife mit
exitzum Beenden - System-Prompt: Erzwingt „immer auf Deutsch“
- Drei Sektionen:
- Frage (Cyan)
- Denkprozess (Gelb, aus
<think>…</think>gezogen) - Antwort (Grün)
- Automatischer Zeilenumbruch und Prefix (z. B. Bullet)
- Windows, Linux oder macOS
- .NET 8.0 SDK (oder höher)
- Visual Studio 2022 (optional) oder
dotnetCLI - Ollama (lokal installiert, Version ≥ 0.4.x)
- Mindestens 12 GB VRAM (RTX 4070 Ti)
- Repository klonen:
git clone https://github.com/dein-nutzername/LocalKIAgent.git
cd LocalKIAgent- Ollama installieren
Windows: Download & Installer von https://ollama.com/download Linux/macOS: siehe Dokumentation
- Ollama-Modelle herunterladen
ollama pull deepseek-r1:8b- Ollama-Server starten
ollama serve- NuGet-Pakete wiederherstellen & bauen
dotnet restore
dotnet build