Ollama

Laufzeit zum Herunterladen und Ausführen kompatibler Sprachmodelle. Geeignet für Entwickler, die eine lokale Modell-API für Prototypen benötigen. Zu beachten: Lokale und gehostete Modelle sind verschiedene Betriebsarten. Modellgröße und Kontext beeinflussen den Speicherbedarf. Betrieb, Zugriff und Modelllizenz gesondert prüfen.