UK’s trusted IT infrastructure partner since 2003
Servnet
FinanceToolsConfiguratorGet in Touch
KI-Infrastruktur

Mac Studio LLM-Performance vs. GPU-Server: Realität 2026

Servnet Editorial · IT-Infrastruktur-Analyse8 Min. Lesezeit
Übersetzung des englischen Originalartikels von Servnet (Vereinigtes Königreich). English · Français · Español
Share

Apple hat den Mac Studio am 25. August 2026 mit den Chips M5 Max und M5 Ultra aktualisiert, und die Zahl, auf die es Käufern für lokale LLMs am meisten ankommt, ist zurück: Der M5 Ultra lässt sich mit 512 GB Unified Memory konfigurieren und bietet eine Speicherbandbreite von 1,2 TB/s. Damit endet eine magere Phase, in der Speicherknappheit laut MacRumors den Mac Studio mit M3 Ultra auf eine einzige Konfiguration mit 96 GB reduziert hatte. Die Speicherkapazität entscheidet aber nur darüber, welche Modelle hineinpassen. Wie schnell sie laufen und ob ein einzelnes Gerät ein ganzes Team bedienen kann, sind getrennte Fragen – und die veröffentlichten Daten zu Tokens pro Sekunde sind unübersichtlicher, als die meisten Vergleiche zugeben.

Qwen2.5-72B Q4_K_M: lokale vs. verteilte Inferenz
30tok/s23tok/s15tok/s8tok/s0tok/s28.2tok/s11.1tok/sM2 Ultra allein29.5tok/s5.9tok/sM2 Ultra + DGX Spark (RPC)Prompt tok/sGenerierung tok/s
View the data behind this chart
Qwen2.5-72B Q4_K_M: lokale vs. verteilte Inferenz
M2 Ultra alleinM2 Ultra + DGX Spark (RPC)
Prompt tok/stok/s28.2tok/s29.5
Generierung tok/stok/s11.1tok/s5.9

Mac Studio für LLMs: Das Fazit 2026

Die ehrliche Einschätzung des Mac Studio fällt eingeschränkter aus, als die Debatte im Netz vermuten lässt. Seine Stärke ist die Kapazität: ein einziger Pool aus Unified Memory, groß genug, um ein großes quantisiertes Modell aufzunehmen, ohne es auf mehrere GPU-Karten aufzuteilen. Da sich der M5 Ultra nun mit 256 GB oder 512 GB konfigurieren lässt, ist dieses Argument so stark wie das ganze Jahr über nicht. Was die veröffentlichten Benchmarks noch nicht zeigen, ist, wie schnell die neuen Chips Modelle der 70B-Klasse ausführen. Die M5-Modelle erreichen Kunden erst ab dem 22. September, und keine der von uns geprüften Quellen enthält ein 70B-Ergebnis für den M5 Ultra.

Die älteren Daten stecken die Erwartungen ab. In einem Generierungstest mit 70B in Q4_K_M vom Mai 2024 erreichte eine Nvidia H100 PCIe 80GB 25,01 tok/s, gegenüber 12,13 tok/s bei einem M2 Ultra mit 76-Kern-GPU. Das ist bei derselben Modellklasse rund die doppelte Generierungsgeschwindigkeit – bei der reinen Geschwindigkeit hat Apple also keinen Vorsprung zu verteidigen. Ein Test vom März 2026, der einen Mac Studio mit M2 Ultra und 128 GB über 10-Gbps-Ethernet mit einem Nvidia DGX Spark koppelte, liefert eine zweite Lehre: Die Aufteilung eines Modells auf beide Maschinen beschleunigte das Prompt Processing, verlangsamte aber die Generierung. Das Argument für den Mac beruht darauf, große Modelle privat auf einem einzigen Desktop-Rechner unterzubringen, nicht darauf, Server-GPUs an Geschwindigkeit zu übertreffen.

Illustration: Mac Studio LLM-Performance vs. GPU-Server – Realität 2026

Apple Silicon vs. Nvidia: Der architektonische Zielkonflikt

Apples Argument ist die Kapazität des Unified Memory: Ein gemeinsamer RAM-Pool für CPU und GPU bedeutet, dass ein großes quantisiertes Modell einfach hineinpasst. Laut Apples aktueller britischer Spezifikationsseite startet der Mac Studio mit M5 Max bei 36 GB und lässt sich auf 48 GB, 64 GB oder 128 GB konfigurieren; der M5 Ultra startet bei 96 GB und lässt sich auf 256 GB oder 512 GB konfigurieren, wobei die Konfiguration mit 512 GB laut Apple Ende Oktober verfügbar wird. Wer verstehen möchte, warum das schon wichtig ist, bevor ein Modell auch nur ein einziges Token generiert, sollte nachlesen, wie viel VRAM ein LLM wirklich braucht, und sich zunächst die Zeit nehmen, den Unterschied zwischen VRAM und RAM zu verstehen.

Die Kapazität entscheidet, was hineinpasst; die Speicherbandbreite entscheidet weitgehend über die Generierungsgeschwindigkeit, weil für jedes Token, das ein dichtes Modell generiert, seine Gewichte gelesen werden müssen. Apple nennt 460 GB/s für den M5 Max mit 32-Kern-GPU, 614 GB/s für den M5 Max mit 40-Kern-GPU und 1,2 TB/s für den M5 Ultra, was laut Apple 50 Prozent mehr ist als zuvor; für den M3 Ultra gab Apple 819 GB/s an. Eine überschlägige Obergrenze macht das greifbar: Bandbreite geteilt durch Modellgröße. Die 44,2 GB große Datei von Qwen2.5-72B in Q4_K_M ergibt auf dem M2 Ultra mit 800 GB/s eine theoretische Obergrenze von etwa 18 tok/s – in der Praxis wurden dort 11,1 tok/s gemessen – und auf dem M5 Ultra mit 1,2 TB/s von etwa 27 tok/s. Verstehen Sie das als Obergrenze für die Single-Stream-Generierung, nicht als Benchmark: Reale Läufe liegen darunter.

Tokens pro Sekunde im Detail: Was die Benchmarks tatsächlich zeigen

Die detailliertesten Daten zur Kombination aus Mac und Nvidia stammen aus einem GitHub-Benchmark vom März 2026 zum RPC-Backend von llama.cpp. Er lief auf einem Mac Studio mit M2 Ultra und 128 GB Unified Memory, der über eine Punkt-zu-Punkt-Verbindung mit 10-Gbps-Ethernet an einen DGX Spark mit Nvidias Chip GB10 Blackwell angebunden war. Bei Qwen2.5-72B-Instruct in Q4_K_M verarbeitete der Mac allein Prompts mit 28,2 tok/s und generierte mit 11,1 tok/s. Die Aufteilung des Modells (30,7 GB auf Metal, 13,8 GB auf CUDA) hob den Prompt-Durchsatz leicht auf 29,5 tok/s an, senkte die Generierung aber auf 5,9 tok/s.

Der Test mit einem kleinen Modell aus demselben Repository lieferte die auffälligen Zahlen, und diese werden leicht falsch gelesen. Bei Qwen2.5-7B-Instruct in Q4_K_M, einem 4,4 GB großen Modell statt eines 70B-Modells, erreichte der Mac allein 76,1 tok/s beim Prompt Processing und 91,8 tok/s bei der Generierung, während die RPC-Aufteilung den Prompt-Durchsatz auf 317,7 tok/s steigerte und die Generierung auf 52,7 tok/s senkte. Das Muster gilt bei beiden Größen: Über eine Netzwerkverbindung tauscht verteilte Inferenz Generierungsgeschwindigkeit gegen Prompt-Geschwindigkeit. Das eigene Fazit des Repositorys lautet, dass der Wert von RPC in der Kapazität liegt – also in Modellen, die für jede der beiden Maschinen allein zu groß sind –, nicht in der Geschwindigkeit.

Die seit Langem gepflegte Ergebnistabelle von llama.cpp für Apple Silicon ergänzt einen Chip-zu-Chip-Vergleich mit dem deutlich kleineren Llama 2 7B in Q4_0. Der M3 Ultra mit 60 Kernen erreichte 1.073,09 tok/s beim Prompt Processing und 88,40 tok/s bei der Generierung, der M4 Max mit 40 Kernen 885,68 und 83,06 und der M5 Max mit 40 Kernen – eine Chipoption, die Apple auch im neuen Mac Studio verkauft – 3.219,99 und 119,92. Bei einem so kleinen Modell zählt neben der Bandbreite auch die Rechenleistung, weshalb der M5 Max hier schneller generiert als der M3 Ultra mit seiner höheren Bandbreite. Lesen Sie diese Werte nur als Hinweis auf die relative Chip-Leistung; ein 7B-Ergebnis sagt wenig über absolute Geschwindigkeiten bei 70B aus.

Die passende Mac-Studio-Konfiguration: Ausstattung und Preis-Leistung für britische Käufer

Apples Launch-Ankündigung und die Mac-Studio-Übersicht von MacRumors nennen als US-Einstiegspreise 2.499 US-Dollar für das Modell mit M5 Max und 5.499 US-Dollar für den M5 Ultra; Vorbestellungen sind möglich, die Verfügbarkeit beginnt am 22. September. Britische Preise in Pfund Sterling haben wir für diesen Artikel nicht verifiziert – prüfen Sie daher vor der Budgetplanung direkt den britischen Apple Store, da sich lokale Preise, die Behandlung der Mehrwertsteuer und die Verfügbarkeit von Konfigurationen unabhängig von den US-Zahlen ändern.

Bei Modellen der 70B-Klasse ist die Speicherstufe wichtiger als die Chip-Bezeichnung. Die Datei von Qwen2.5-72B in Q4_K_M aus dem obigen Benchmark ist 44,2 GB groß, bevor überhaupt Kontext geladen ist, sodass ein M5 Max mit 64 GB nur begrenzte Reserven für macOS, lange Prompts und den KV-Cache lässt. Der M5 Max mit 128 GB und der M5 Ultra ab 96 GB sind die realistischen Ausgangspunkte, und die Bandbreite von 1,2 TB/s dürfte dem M5 Ultra beim selben Modell einen Vorteil bei der Generierungsgeschwindigkeit verschaffen. Die Stufen des M5 Ultra mit 256 GB und 512 GB sind für Modelle gedacht, die auf kleinere Maschinen überhaupt nicht passen. Genau diese Obergrenze von 512 GB nannte Apple im März 2025, als es erklärte, ein Mac Studio mit M3 Ultra könne LLMs mit über 600 Milliarden Parametern vollständig im Arbeitsspeicher ausführen. Der praktische Vorbehalt ist die Verfügbarkeit: Die Konfiguration mit 512 GB wird erst Ende Oktober erwartet, und Speicherknappheit hat die obersten Speicherstufen in diesem Jahr bereits einmal vom Markt verschwinden lassen – klären Sie daher die Lieferzeiten, bevor Sie damit planen.

Praxisbeispiel: Ein 70B-Modell zum Laufen bringen – und der Software-Stack, auf den es ankommt

Für ein Modell der 70B-Klasse mit Q4_K_M-Quantisierung auf einem Mac Studio mit 96 GB oder mehr sind die praktischen Schritte: eine Runtime wählen, einen vorquantisierten Checkpoint im GGUF- oder MLX-Format herunterladen, ihn laden und oberhalb der Modellgewichte genügend Unified-Memory-Reserve für Kontext und System-Overhead lassen, bevor lange Prompts verarbeitet werden.

Die gewählte Runtime verändert das Ergebnis spürbar, doch der beste veröffentlichte Runtime-Vergleich, den wir gefunden haben, ist kein 70B-Test. Der Bericht von Famstack vom März 2026 ließ Qwen3 30B-A3B, ein Mixture-of-Experts-Modell, einen Ops-Agent-Workload mit acht Dialogrunden auf einem MacBook Pro mit M1 Max und 64 GB durchlaufen und maß dabei die effektiven tok/s, in die neben der Generierung auch das Prompt Processing einfließt. Mit GGUF-Gewichten auf der llama.cpp-Engine erreichte LM Studio 41,7, aus dem Quellcode kompiliertes llama.cpp 41,4 und Ollama 26,0 – also 37 % langsamer als LM Studio auf derselben Engine. Auf der MLX-Engine lag oMLX mit 38,0 vorn, während der MLX-Modus von LM Studio auf 17,0 kam. Die praktische Lehre für britische Käufer: Der Wrapper kann ebenso viel ausmachen wie die Engine – benchmarken Sie daher Ihr eigenes Modell, Ihre eigene Quantisierung und Ihren eigenen Workload auf Ihrer eigenen Maschine, bevor Sie sich auf eine Lösung als Standard festlegen.

Effektive tok/s nach Runtime: Qwen3 30B-A3B auf M1 Max
50tok/s38tok/s25tok/s13tok/s0tok/s41.7tok/sLM Studio41.4tok/sllama.cpp38tok/soMLX26tok/sOllamaEffektive tok/s
View the data behind this chart
Effektive tok/s nach Runtime: Qwen3 30B-A3B auf M1 Max
LM Studiollama.cppoMLXOllama
Effektive tok/stok/s41.7tok/s41.4tok/s38tok/s26

Strom, Lautstärke und die TCO-Lücke, zu der noch niemand Zahlen veröffentlicht

Hier zählt Ehrlichkeit mehr als eine selbstbewusst klingende Zahl. In den aktuellen Daten gibt es weder für den Mac Studio noch für eine vergleichbare Nvidia-GPU-Workstation bei kontinuierlicher LLM-Inferenz einen verifizierten Wert für Leistungsaufnahme, Stromkosten oder Lüftergeräusch. Eine TCO-Tabelle auf Basis erfundener Verbrauchswerte ist schlechter als gar keine.

Britische Teams können den Vergleich stattdessen sauber strukturieren, bevor sie einen Anbieter nach Zahlen fragen: Kaufpreis, erwarteter Wiederverkaufswert und Betriebskosten sind drei getrennte Posten, und für den Posten Betriebskosten braucht es eine vom Anbieter angegebene dauerhafte Leistungsaufnahme unter LLM-Last – keinen Leerlauf- oder Spitzenwert aus dem Datenblatt –, multipliziert mit Ihrem tatsächlichen britischen Stromtarif. Bevor Sie Budget freigeben, lohnt sich ein Blick in den aktuellen KI-Server-Kostenindex, der Kostenbasiswerte für GPU-Server liefert, an denen sich ein Mac-Studio-Angebot Posten für Posten messen lässt.

Mac Studio vs. GPU-Server: Wann lokal wirklich sinnvoll ist

Das Argument für einen Mac Studio ist eng umrissen, aber real: ein einzelner Anwender, der ein großes quantisiertes Modell privat betreibt, ohne Anforderungen an gleichzeitige Nutzer, Batching oder CUDA-spezifische Tools. Mit den Stufen des M5 Ultra mit 256 GB und 512 GB kann ein einziger Desktop-Rechner Modelle aufnehmen, für die sonst mehrere separate GPU-Karten nötig wären, und die veröffentlichten Daten zeigen, dass selbst der ältere M2 Ultra bei Modellen der 70B-Klasse 11,1 bis 12,13 tok/s generiert – brauchbar für eine Person, die parallel dazu liest und schreibt.

Gegen ihn spricht alles, was über einen einzelnen Nutzer hinausgeht. Die Daten zur RPC-Split-Inferenz zeigen, dass die Generierung langsamer wird, sobald man Mac- und Nvidia-Hardware für mehr Kapazität kombiniert, und der Vergleich H100 gegen M2 Ultra zeigt, dass eine Server-GPU in derselben 70B-Modellklasse rund doppelt so viele Tokens pro Sekunde generiert. Wenn Ihr Workload Batching, Fine-Tuning oder mehrere parallele Inferenz-Streams erfordert, sollten Sie den Vergleich sauber durchführen: Self-Hosting von LLMs mit den Kosten für Cloud-GPUs vergleichen und mit unserem KI-GPU-Rechner die Alternative dimensionieren, bevor Sie sich für einen der beiden Wege entscheiden.

Zukunftssicherheit: Was vor dem Kauf 2026 zu bedenken ist

Die Angebotsschwankungen dieses Jahres sind die eigentliche Lehre zur Zukunftssicherheit. Im Mai 2026 berichtete MacRumors, Apple habe den Mac Studio mit M3 Ultra wegen sich verschärfender Speicherknappheit auf eine einzige Konfiguration mit 96 GB reduziert; das Update vom 25. August brachte mit dem M5 Ultra die Optionen mit 256 GB und 512 GB zurück. Speicherstufen können je nach Liefersituation verschwinden und wiederkehren – wenn Ihre Planung also vom M5 Ultra mit 512 GB abhängt, der laut Apple Ende Oktober verfügbar wird, sollten Sie die Verfügbarkeit als zu steuerndes Risiko behandeln und nicht als gegeben voraussetzen.

Für britische Teams, die mit wachsenden Modellanforderungen rechnen – größere Kontextfenster, mehr Parameter, Mehrbenutzerdienste –, bleibt der CUDA-Pfad der besser erweiterbare, schlicht weil VRAM-Pooling, Batching und Fine-Tuning-Tools um ihn herum entwickelt wurden, statt nachträglich darauf aufgesetzt zu werden. Bevor Sie annehmen, dass der günstiger wirkende Mac-Weg auch dann günstiger bleibt, wenn sich Ihre Anforderungen ändern, sehen Sie sich unseren Vergleich von KI-GPU-Servern für 2026 an.

Quellen

Jede Zahl in diesem Artikel lässt sich auf die folgenden Quellen zurückführen.

Llama 2 7B Q4_0: Generierung nach Apple-Chip
120tok/s90tok/s60tok/s30tok/s0tok/s83.06tok/sM4 Max, 40-Kern-GPU88.4tok/sM3 Ultra, 60-Kern-GPU119.92tok/sM5 Max, 40-Kern-GPUGenerierung tok/s
View the data behind this chart
Llama 2 7B Q4_0: Generierung nach Apple-Chip
M4 Max, 40-Kern-GPUM3 Ultra, 60-Kern-GPUM5 Max, 40-Kern-GPU
Generierung tok/stok/s83.06tok/s88.4tok/s119.92
Share
Das Wichtigste in Kürze
  • Apples Update vom 25. August 2026 hat die Mac-Studio-Optionen mit viel Speicher zurückgebracht: Der M5 Max lässt sich auf 128 GB konfigurieren und der M5 Ultra auf 256 GB oder 512 GB, wobei die Konfiguration mit 512 GB Ende Oktober erwartet wird.
  • Der Generierungswert von 91,8 tok/s für den Mac Studio in einem RPC-Benchmark mit llama.cpp stammt von einem 7B-Modell, nicht von einem 70B-Modell; bei Qwen2.5-72B in Q4_K_M generierte derselbe M2 Ultra allein 11,1 tok/s und bei Aufteilung mit einem DGX Spark über 10GbE 5,9 tok/s.
  • Nvidia behält den Vorsprung bei der reinen Geschwindigkeit: Eine H100 PCIe 80GB generierte bei Llama 3 70B in Q4_K_M 25,01 tok/s, ein M2 Ultra dagegen 12,13 tok/s – rund doppelt so schnell.
  • Die Wahl der Runtime ist so wichtig wie die Hardware: In einem Agent-Workload-Test auf Apple Silicon erzielten LM Studio und llama.cpp 41,7 bzw. 41,4 effektive tok/s, oMLX 38,0 und Ollama 26,0 – benchmarken Sie daher Ihr eigenes Setup, statt dem Ruf einer einzelnen Runtime zu vertrauen.
  • Wir haben für keine der beiden Plattformen verifizierte Werte zu Leistungsaufnahme oder Lautstärke unter kontinuierlicher LLM-Last gefunden und bislang auch keinen veröffentlichten 70B-Benchmark für den M5 Ultra – begegnen Sie anderswo genannten TCO- oder M5-Geschwindigkeitszahlen daher mit derselben Skepsis wie einem Benchmark ohne Quellenangabe.
Häufige Fragen

FAQMac Studio LLM-Performance vs. GPU-Server

Welche Mac-Studio-Konfiguration eignet sich 2026 am besten für LLMs mit 70B+ Parametern?

Beginnen Sie beim Speicher. Die Datei von Qwen2.5-72B in Q4_K_M aus einem veröffentlichten Benchmark ist ohne Kontext 44,2 GB groß – ziehen Sie daher den M5 Max mit 128 GB oder den M5 Ultra (ab 96 GB) in Betracht statt einer Maschine mit 64 GB. Die Speicherbandbreite des M5 Ultra von 1,2 TB/s, gegenüber 614 GB/s beim schnellsten M5 Max, dürfte ihm bei der Generierungsgeschwindigkeit einen Vorteil verschaffen; die Stufen mit 256 GB und 512 GB sind für Modelle gedacht, die nicht in kleinere Konfigurationen passen.

Kann ein Mac Studio wirklich ein Modell mit 600 Milliarden Parametern ausführen?

Apple erklärte im März 2025, ein Mac Studio mit M3 Ultra und 512 GB Unified Memory könne LLMs mit über 600 Milliarden Parametern vollständig im Arbeitsspeicher ausführen. Der M5 Ultra kehrt zu dieser Obergrenze von 512 GB zurück, laut Apple ist diese Konfiguration jedoch erst Ende Oktober 2026 verfügbar – und dass ein Modell in den Speicher passt, sagt nichts darüber aus, wie schnell es generiert.

Ist ein Mac Studio oder ein Nvidia-GPU-Server bei 70B-LLM-Inferenz schneller?

Nach den veröffentlichten Daten die Nvidia-Server-GPU. Eine H100 PCIe 80GB generierte bei Llama 3 70B in Q4_K_M 25,01 tok/s, ein M2 Ultra dagegen 12,13 tok/s. Einen veröffentlichten 70B-Benchmark für den M5 Ultra haben wir bislang nicht gefunden; seine Bandbreite von 1,2 TB/s ergibt bei einem 44,2 GB großen Modell der 72B-Klasse eine theoretische Obergrenze von etwa 27 tok/s, und reale Läufe liegen unter solchen Obergrenzen.

Welcher Software-Stack läuft auf dem Mac Studio am schnellsten: Ollama, MLX oder llama.cpp?

Das hängt vom Modell und vom Workload ab. Im Agent-Workload-Test von Famstack vom März 2026 mit Qwen3 30B-A3B auf einem M1 Max lagen LM Studio (41,7 effektive tok/s) und llama.cpp (41,4) vorn, das MLX-basierte oMLX erreichte 38,0 und Ollama 26,0. Benchmarken Sie Ihr eigenes Modell und Ihre eigene Quantisierung, bevor Sie sich entscheiden.

Bringt es tatsächlich etwas, die Inferenz zwischen einem Mac Studio und einer Nvidia-GPU aufzuteilen?

Es hilft beim Prompt Processing, schadet aber der Generierung. In einem RPC-Test mit llama.cpp vom März 2026, der einen Mac Studio mit M2 Ultra über 10-Gbps-Ethernet mit einem DGX Spark koppelte, steigerte die Aufteilung von Qwen2.5-7B in Q4_K_M den Prompt-Durchsatz von 76,1 auf 317,7 tok/s, senkte die Generierung aber von 91,8 auf 52,7 tok/s; bei Qwen2.5-72B fiel die Generierung von 11,1 auf 5,9 tok/s.

Sollte ein britisches Unternehmen einen gemeinsam genutzten LLM-Dienst auf einem Mac Studio betreiben?

Die veröffentlichten Benchmark-Daten decken Single-Stream-Inferenz ab, nicht den Durchsatz bei mehreren gleichzeitigen Nutzern, Batching oder Fine-Tuning – also genau die Bereiche, für deren Skalierung CUDA-basierte Server-GPUs ausgelegt sind. Der Mac Studio passt besser zu einem speichergebundenen Einsatz durch einen einzelnen Anwender als zu einem gemeinsam genutzten Produktivdienst.

Weiterführend

Noch Fragen, die dieser Artikel nicht beantwortet?

Ein Gespräch mit einem Engineer, der das schon gemacht hat. Ohne Verkaufsskript. Bitte beachten Sie: Unser Team berät ausschließlich auf Englisch.

Kontakt auf Englisch →

Talk to a UK specialist

Get expert advice or a no-obligation quote — servers, storage, networking, maintenance, finance and cloud. We reply the same working day.

or call 0800 987 4111