Zum Inhalt springen
22+ Projekte erfolgreich umgesetzt5,0★Google Bewertung · NorddeutschlandAnfrage senden: Antwort in 24 h →
Hardware für Ollama

Wie viel Rechner braucht Ihre eigene KI wirklich?

Die kurze Antwort: für die meisten Anwendungen im Mittelstand reichen 16 GB RAM und kein Grafikprozessor. Die lange Antwort steht unten, mit dem Rechenweg statt einer Faustregel.

Der Speicherbedarf hängt am Modell, nicht an Ollama

Faustformel für die übliche 4-Bit-Quantisierung: Parameter in Milliarden × 0,6 ergibt den Bedarf in Gigabyte, plus Reserve für Kontext und Betriebssystem. Danach sind die Werte unten gerechnet.

ModellklasseBeispieleRAMVRAM
3B

Kurze Texte zusammenfassen, einfache Klassifizierung. Merklich schwächer bei allem, was Schlussfolgern verlangt.

Llama 3.2 3B, Phi-3 Mini6 GBnicht nötig
7–8BRegelfall

Der Bereich, in dem die meisten KMU-Anwendungen liegen: E-Mails vorformulieren, Dokumente durchsuchen, Angebote aus Stichpunkten.

Llama 3.1 8B, Mistral 7B, Qwen 2.5 7B12 GB8 GB
14B

Spürbar besser bei mehrstufigen Aufgaben. Ohne Grafikkarte wird die Wartezeit unangenehm.

Qwen 2.5 14B, Phi-420 GB12 GB
70B

Nahe an den Cloud-Modellen. Ohne Grafikkarte praktisch nicht alltagstauglich.

Llama 3.3 70B48 GB24 GB (4-Bit) bis 48 GB

VRAM ist der Speicher der Grafikkarte. Steht dort ein Wert, läuft das Modell damit deutlich schneller — nötig ist es erst ab der 14-B-Klasse.

Mieten, kaufen oder ins Büro stellen

Drei Wege, die sich vor allem darin unterscheiden, wer die Verantwortung für den laufenden Betrieb trägt.

Der übliche Einstieg

VPS beim deutschen Anbieter

  • Minimum 8 GB RAM, 4 vCPU → 7-B-Modelle
  • Empfohlen 16 GB RAM, 8 vCPU
  • Kein Serverraum nötig, Daten bleiben in Deutschland

ca. 10–20 €/Monat

Ein bis zehn Nutzer, Texte und Dokumente. Für die allermeisten der richtige Start.

Daten verlassen das Haus nie

NAS oder Mini-PC im Büro

  • Minimum 16 GB RAM, moderner x86-Prozessor
  • Einmalige Anschaffung statt Monatsmiete
  • Wartung, Backup und Erreichbarkeit liegen bei Ihnen

einmalig, je nach Gerät

Wenn Daten das Netzwerk nicht verlassen dürfen und jemand im Haus die Technik betreut.

Wenn 70B oder viele Nutzer

Server mit Grafikkarte

  • NVIDIA RTX 4090 (24 GB VRAM) oder A6000 (48 GB VRAM)
  • Antwortzeiten im Bereich der Cloud-Dienste
  • Auch als Miete bei deutschen Anbietern verfügbar

ab ca. 150 €/Monat

Große Modelle, viele gleichzeitige Nutzer oder Aufgaben, bei denen Wartezeit stört.

Alle Beträge auf dieser Seite sind Marktpreise deutscher Anbieter (Stand Juli 2026), keine Preise von webAION und keine Provision für uns. Prüfen Sie sie vor der Entscheidung beim Anbieter Ihrer Wahl — sie ändern sich.

Was Sie beim Tempo erwarten dürfen

Ollama läuft auch ohne Grafikkarte, dann rechnet der Prozessor. Bei 7-B-Modellen bleibt das im Bereich weniger Sekunden pro Antwort und stört im Alltag nicht. Bei 70-B-Modellen wird daraus eine spürbare Wartezeit. Eine Grafikkarte beschleunigt die Ausgabe grob um den Faktor fünf bis zehn.

Das sind Größenordnungen, keine Messwerte für Ihre Hardware. Wie schnell es bei Ihnen wird, hängt an Prozessor, Speicherbandbreite, Modell und Kontextlänge. Wer eine belastbare Zahl braucht, misst sie auf der Zielmaschine — alles andere ist geraten.

Häufige Fragen zur Ollama-Hardware

Welche Größe passt zu Ihrem Fall?

Schreiben Sie kurz, welche Aufgaben die KI übernehmen soll und wie viele Leute damit arbeiten würden. Dann sagen wir Ihnen, welche Modellklasse reicht — und ob sich ein eigener Server überhaupt lohnt.

Und wenn ich ausfalle?

Bei einer Ein-Personen-Firma ist das die berechtigte Frage. Die ehrliche Antwort vorweg: Es gibt keine Vertretung, die einspringt. Deshalb ist alles so gebaut, dass Sie auch ohne mich handlungsfähig bleiben.

Die Zugänge gehören Ihnen

Domain, Hosting-Konto und alle Zugangsdaten laufen auf Ihren Namen, nicht auf meinen. Sie brauchen mich nicht, um an Ihre eigene Website zu kommen.

Der Code gehört Ihnen

Beim Kauf ohnehin. Auch sonst ist es normaler Astro- und TypeScript-Code in einem Git-Repository, kein Baukasten und kein Format, das nur ich öffnen kann.

Nichts davon ist Eigenbau

Astro, n8n, Docker, Postgres. Alles quelloffen und weit verbreitet. Jede Webagentur und jeder freie Entwickler kann das übernehmen, ohne sich in ein Sondersystem einzuarbeiten.

Sie sitzen nie fest

Mietverträge laufen nach 24 Monaten Mindestlaufzeit monatlich weiter und sind monatlich kündbar. Kein automatisch verlängerter Jahresvertrag, aus dem Sie nicht rauskommen.

Was Sie im Gegenzug bekommen: Sie sprechen mit der Person, die auch baut. Keine Weitergabe an ein Junior-Team, keine Rückfrage-Schleife über einen Projektleiter.