KI-Buch für Kinder KI-Buch für Jugendliche KI-Buch für Familien Neue Reihe Kennen Sie schon unsere Buchreihe? KI für Kinder, Jugendliche und Erwachsene Bücher entdecken

NVIDIA DGX Spark GB10: Lokale KI-Workstation für KMU im Test

nvidia-dgx-spark lokale-ki hardware

Der NVIDIA DGX Spark ist kein Gaming-PC und kein Rechenzentrums-Knoten. Er ist eine kompakte Desktop-Workstation, die speziell dafür entwickelt wurde, große Sprachmodelle vollständig lokal zu betreiben, ohne Cloud-API, ohne Datentransfer, ohne monatliche Token-Kosten. Seit Anfang 2026 taucht das Gerät regelmäßig in Empfehlungslisten von Entwicklern und Infrastruktur-Enthusiasten auf. Saiyam Pathak, ein Entwickler und KubeSimplify-Gründer, führt in seiner curated Local-LLM-Ressourcenliste auf X ausdrücklich die DGX-Spark-Dokumentation auf, neben Ollama, llama.cpp und r/LocalLLaMA, mit dem Kommentar "Pick one. Build this week."

Für KMU, die nach DSGVO-konformer KI-Infrastruktur suchen, ist der DGX Spark damit erstmals eine ernsthafte Kaufoption jenseits des Apple-Ökosystems. Dieser Artikel zeigt, was die Hardware wirklich kann, wo der Mac Studio die Nase vorne hat, und wann welche Investition sinnvoll ist.

Was steckt im DGX Spark GB10?

Der DGX Spark verwendet NVIDIAs GB10 Grace Blackwell Superchip: eine ARM-basierte 20-Kern-CPU und eine Blackwell-GPU (Compute Capability 12.1) auf einem gemeinsamen Chip-Package, verbunden via NVLink-C2C mit extrem hoher interner Bandbreite. Beide Einheiten teilen denselben Pool aus 128 GB LPDDR5X-Arbeitsspeicher mit rund 273 GB/s Bandbreite, strukturell ähnlich dem Unified-Memory-Prinzip von Apple Silicon, aber mit CUDA und dem vollständigen NVIDIA-Software-Stack.

Das Ergebnis: 70B-Modelle wie Llama 3.3 oder DeepSeek-R1 passen vollständig in den RAM und können ohne Quantisierungs-Kompromisse für produktive Aufgaben eingesetzt werden. Laut Community-Messungen liegt die Inferenzrate bei Llama 3.1 8B um die 20 tok/s bei Einzelanfragen und skaliert auf über 350 tok/s bei Batch-Verarbeitung, je nach Modell, Quantisierungsgrad und Anfragemuster.

Der UVP der Founders Edition wurde im Februar 2026 von rund 3.999 USD auf rund 4.699 USD angehoben, laut Fachpublikationen aufgrund von Speicherengpässen. Drittanbieter wie ASUS bieten das GB10 unter eigenem Label zu leicht abweichenden Konditionen an.

DGX Spark vs. Mac Studio: Was die Zahlen zeigen

Der direkte Vergleich ergibt kein eindeutiges Gesamtergebnis, wohl aber ein klares Muster je nach Anwendungsfall.

Token-Generierung (Inferenz)

Hier haben Apple-Chips einen strukturellen Vorteil. Mac Studio M4 Max und M3 Ultra erreichen laut Community-Benchmarks 410-800 GB/s Speicherbandbreite, der DGX Spark kommt auf rund 273 GB/s. Für reine Inferenz, Chatbots, Dokumentenverarbeitung, KI-Assistenz, bedeutet das: Mac Studio generiert Token in vielen Szenarien schneller. Wer hauptsächlich Antworten generiert und keine Fine-Tuning-Pipeline braucht, erhält mit einem Mac Studio M4 Max ab etwa 1.850 € mehr Durchsatz pro Euro.

Prompt-Verarbeitung (Prefill)

Bei der Verarbeitung langer Eingaben, mehrseitige Dokumente, RAG-Kontexte, Code-Repositories, liegt der DGX Spark dank FP4-Quantisierung auf Augenhöhe mit Multi-GPU-Setups aus der Vorgeneration, laut Community-Benchmarks vergleichbar mit drei RTX 3090 im Verbund. Für Anwendungen, die sehr lange Kontextfenster verarbeiten, ist das relevant.

Fine-Tuning und Training

Das ist der entscheidende Unterschied. CUDA ist das etablierte Ökosystem für LoRA- und QLoRA-Fine-Tuning. Laut NVIDIAs technischem Blog wurden auf dem DGX Spark für das Fine-Tuning von Llama 3.1 8B mit LoRA über 50.000 tok/s Trainings-Durchsatz gemessen; Llama 3.3 70B mit QLoRA noch über 5.000 tok/s. Das MLX-Ökosystem von Apple entwickelt sich weiter, ist aber für solche Workflows deutlich weniger ausgereift, CUDA ist hier jahre­lang voraus.

Software-Ökosystem

Auf dem DGX Spark läuft Linux mit dem vollständigen NVIDIA-Stack: CUDA, cuDNN, TensorRT, TensorRT-LLM und NIM-Microservices. Ollama, llama.cpp und vLLM erkennen den GB10 automatisch. NVIDIA stellt offizielle DGX Spark Playbooks auf GitHub bereit, für llama.cpp, Ollama, vLLM und komplette LLM-Stack-Setups. Die Einrichtungszeit ist damit kurz, selbst für Teams ohne CUDA-Erfahrung.

Geräusch und Wärme

Mac Studio läuft in nahezu allen Alltagsszenarien still. Der DGX Spark nutzt aktive Kühlung und wird unter Last deutlich wärmer als Apple-Hardware, leiser als ein Gaming-PC, aber im Büro hörbar. Für Büroumgebungen ist das ein praktisch relevanter Punkt.

Für welche KMU passt welche Hardware?

DGX Spark empfiehlt sich, wenn:

  • Das Team Fine-Tuning auf eigenen Unternehmensdaten plant (LoRA, QLoRA)
  • Eine Linux-basierte, CUDA-native Produktionsinfrastruktur aufgebaut werden soll
  • 70B+-Modelle (DeepSeek-R1, Llama 3.3 70B) ohne Cloud-API benötigt werden
  • Erfahrung mit PyTorch, Hugging Face Transformers oder NVIDIA NIM vorhanden ist
  • Mehrere Modelle im Wechsel betrieben oder ein LLM-Router (LiteLLM, llama-swap) eingesetzt werden soll

Mac Studio empfiehlt sich, wenn:

  • Die primäre Aufgabe reine Inferenz ist, Chatbot, Dokumentenanalyse, Assistenz
  • Das Büroumfeld Stille erfordert
  • macOS-Integration gewünscht wird (Xcode, Apple Intelligence, Shortcuts)
  • Das Budget begrenzt ist: M4 Max ab rund 1.850 € ist deutlich günstiger

Beide Optionen teilen denselben zentralen Vorteil für datensensible Unternehmen: vollständige Datensouveränität. Kein Prompt verlässt das Gerät. Kein API-Schlüssel muss geschützt werden. Keine Cloud-Datentransfers müssen im Rahmen der DSGVO dokumentiert werden. Für DSGVO-konforme KI in deutschen und europäischen KMU ist das der gemeinsame Hauptvorteil gegenüber jeder Cloud-API. Mehr dazu auf unserer Seite zur Datensouveränität bei lokaler KI.

Gesamtkosten im Überblick

Cloud-API-Kosten für ein mittelgroßes Team liegen laut Praktiker-Erfahrungen typischerweise bei 200-600 € pro Monat bei moderaten Nutzungsvolumina. Ein DGX Spark oder Mac Studio M3 Ultra amortisiert sich bei intensiver Nutzung innerhalb von zwei bis drei Jahren, ohne variable Abrechnung, ohne Rate-Limits und ohne Vendor-Lock-in. Diese Einschätzung dient der Orientierung und hängt stark vom individuellen Nutzungsprofil ab.

Für die steuerliche Behandlung und mögliche BAFA-Förderprogramme für digitale Infrastruktur empfiehlt sich eine individuelle Beratung. Gemäß unserem Verständnis können Workstations dieser Art als Betriebsmittel abgeschrieben werden, konkrete Konditionen sind jedoch mit einem Steuerberater zu klären. Dies ist keine steuerliche Beratung.

Erste Schritte

Wer den DGX Spark einsetzen möchte, findet in den offiziellen NVIDIA-Playbooks einen guten Startpunkt. Ollama läuft sofort nach der Installation und erkennt den GB10 automatisch. Für komplexere Setups, vLLM, llama-swap, LiteLLM-Router, gibt es ausführliche Community-Anleitungen.

Wenn Sie noch nicht entschieden haben, ob lokale KI-Infrastruktur für Ihr Unternehmen sinnvoll ist, unterstützen wir Sie mit einer konkreten Machbarkeitsprüfung: Hardware, Modell, Use-Case, aufeinander abgestimmt, ohne Cloud-Abhängigkeit. Mehr über unsere lokale KI-Angebote finden Sie auf dieser Seite.

Sprechen Sie uns direkt an, auf unserer Pilotprojekt-Seite beschreiben Sie kurz Ihren Anwendungsfall, und wir melden uns innerhalb eines Werktags.